Kimi K3
2.8T 参数开放 MoE,采用 KDA 与 Attention Residuals,支持原生视觉和 1M 上下文。
K3 将开放模型规模推到 3T 级,同时保持 Agent、视觉与长上下文的一体化定位。
关键参数
- 上下文窗口
- 1.05M
- 最大输出
- 131K
- 总参数
- 2.8T
- 架构
- MoE
- 许可证
- Kimi K3 License
版本谱系
变更历史
- 公布Kimi K3 公布,规模提升到 2.8T 并加入原生视觉。原文 ↗
2.8T 参数开放 MoE,采用 KDA 与 Attention Residuals,支持原生视觉和 1M 上下文。
K3 将开放模型规模推到 3T 级,同时保持 Agent、视觉与长上下文的一体化定位。