模型 信源:Hacker News 热门(buzzing.cc 中文翻译) · 👁️ 34884 次研读

IFM 发布 K2 Horizon 六款开源模型,覆盖 0.9B 到 375B-A23B 并开放完整训练生命周期

IFM 发布 K2 Horizon 六款开源模型,覆盖 0.9B 到 375B-A23B 并开放完整训练生命周期
💡 灵机 AI 深度洞见与核心提炼
IFM 发布 K2 Horizon 模型系列,共六个模型:375B-A23B、36B-A4B、32B、7B、3.7B 和 0.9B,均以 Apache 2.0 开源,其中 0.9B、3.7B 和 7B 宣称在其规模上达到 SOTA,36B-A4B 采用新提出的稀疏注意力架构 MoVA。
信源媒体:Hacker News 热门(buzzing.cc 中文翻译)
访问出处网页 ↗
阅读原文出处 ↗