万亿参数!Kimi开源大模型创纪录
月之暗面发布KimiK3,总参数2.8万亿,采用稀疏MoE架构(896专家激活16个)及KDA混合注意力机制,扩展效率较K2提升2.5倍。长程Agent能力突出,可独立完成芯片设计等复杂任务,在编程基准上超越GPT-5.5等模型,但综合表现仍落后顶尖闭源模型。完整权重预计7月27日开源。
Kimi 再次刷新了开源模型的参数规模纪录。
2026 年 7 月 17 日,月之暗面正式发布 Kimi K3,总参数达到 2.8 万亿,原生支持视觉理解与 100 万 Token 上下文,成为首个接近 3 万亿参数的开放权重模型。这也是 Kimi 系列迄今为止能力最强的模型。
与总参数 1 万亿的 Kimi K2 相比,K3 的规模几乎翻了两倍。不过,这 2.8 万亿参数并非在每次推理时全部激活。K3 采用更稀疏的 MoE 架构,共包含 896 个专家,每次推理仅激活其中的 16 个。

月之暗面还引入了 KDA 混合线性注意力机制(Kimi Delta Attention)和注意力残差(Attention Residuals)两项架构改进,宣称整体扩展效率较 K2 提升约 2.5 倍。
K3 的核心能力聚焦于长时间写代码、调用工具以及完成复杂的知识工作,即长程 Agent 能力。最新演示中,它可以独立优化 GPU 算子、开发编译器、制作 3D 游戏,甚至连续运行 48 小时完成一颗小型芯片的设计与验证。这在一定程度上证明了 K3 在复杂任务链上的可靠性。

对于普通用户而言,更熟悉的场景包括研究报告、PPT、表格、视频编辑,以及由多个子 Agent 协同完成的长期任务。
测试成绩表现强劲。在月之暗面公布的评测中,K3 在多项编程和 Agent 基准上超越 GPT-5.5、Claude Opus 4.8,部分项目接近更强的 Claude Fable 5 和 GPT-5.6 Sol。不过月之暗面也承认,K3 的综合表现和实际体验仍落后于顶尖闭源模型,但在整套评测中展现的能力已稳定超过其他所有模型。

K3 最值得关注的意义在于,中国开源模型正以更快的迭代速度,将顶尖模型从少数公司的围墙中逐步搬出。
最后补充一点:K3 目前已登陆 Kimi、Kimi Work、Kimi Code 和 API,但完整权重预计要到 7 月 27 日才会发布。严格来说,模型与产品已经发布,开源还差最后一步。
