Kimi K3:开放前沿智能
Kimi K3 是首个达到 2.8 万亿参数的开源模型,标志着 Kimi 在扩展前沿的持续推进——今年连续第三次推出前沿级开源模型。
架构创新
Kimi K3 基于 Kimi Delta Attention(KDA)和 Attention Residuals(AttnRes)构建,这两项架构更新旨在改善信息在 2.8T 参数模型中的流动方式。架构采用 Stable Latent MoE(专家混合)搭配 Gated MLA(多头潜在注意力),这种设计在保持推理速度的同时实现了高效扩展。
核心能力
Kimi K3 在编码、游戏开发、知识工作和科学研究领域展现出前沿级性能:
游戏开发:使用 Three.js WebGPU 构建了完全程序化生成的浏览器端 3D 探索游戏
芯片设计:在单次 48 小时自主运行中设计出一款服务于 nano 模型的芯片
科学研究:在约 2 小时内完成通常需要 1-2 周的复杂研究工作流
内核优化:开发了 MiniTriton——一个紧凑的类 Triton 编译器,具备完整的 CUDA 内核生成能力,在单次自主两小时会话中完成
基准表现
在编码基准测试(SWE-bench、LiveCodeBench)、知识工作和多模态任务上,Kimi K3 均取得前沿级结果。在开发后期,Kimi K3 的早期版本承担了团队大部分的内核优化工作。
可用性与限制
Kimi K3 即日起在 Kimi.com、Kimi Work、Kimi Code 和 Kimi API 上可用。发布时默认使用最大思考深度,低功耗模式即将推出。整体性能在某些基准上仍落后于 Claude Fable 5 和 GPT 5.6 Sol,特别是在精细化用户体验方面。