产品 信源:vLLM 官方博客(RSS) · 👁️ 39386 次研读

vLLM 发布 Mistral Large 4 Day 0 支持

vLLM 发布 Mistral Large 4 Day 0 支持
💡 灵机 AI 深度洞见与核心提炼
vLLM 团队宣布对 Mistral 新旗舰模型 Mistral Large 4 提供 Day 0 支持,该模型为 1T 参数、每 token 激活 49B 的原生多模态 MoE 模型,采用 MLA 稀疏注意力加 DSA top-k 索引器、跨层 KV 共享、NoPE、SSMax 和 LeRoPE 等新架构,并内置 DSpark 推测解码草稿器与 Pixtral 视觉编码器。
信源媒体:vLLM 官方博客(RSS)
访问出处网页 ↗
阅读原文出处 ↗