Kimi K3开放日开启！模型权重、技术报告及关键Infra技术开源，加速AGI研究与部署。核心内容：1. Kimi K3模型权重详情（参数规模、技术创新及部署方式）2. 技术报告核心技术细节（KDA+AttnRes、Stable LatentMoE等）3. 开源关键Infra技术（MoonEP、FlashKDA、AgentEnv）
感谢大家的耐心等待。今天是 Kimi K3 开放日，我们发布 Kimi K3 的模型权重、技术报告，并开源支撑 Kimi K3 模型训练的关键 Infra 技术：MoonEP、FlashKDA和AgentEnv。希望以此加速前沿智能的部署与普及，促进 AGI 研究。
Kimi K3 权重公布Kimi K3 是我们能力最强的模型：这是一个拥有 2.8 万亿参数的混合专家（MoE）模型，具备原生视觉理解能力，并支持 100 万 token 的上下文窗口。Kimi K3 参数规模是 Kimi K2.5 的 3 倍左右，但是规模化并不仅仅是参数的堆叠，在并不宽裕的算力条件下，我们凭借 Kimi Delta Attention、Attention Residuals 以及 MoonEP 等一系列技术创新，规模化效率提升了 2.5 倍（即在算力最优意义下，单位算力产出智能约等于原来 2.5 倍）。
现在，每个人都可以下载并部署 Kimi K3 模型——无论是用于内部研发，还是嵌入到面向终端用户的产品中，均可自由使用（其他使用情形，详见Kimi K3 许可证）。
![]()
→ 下载 Kimi K3 模型权重
今天同步上线的 Kimi K3 技术报告，公开了我们的模型训练方法；此次与报告一同发布的，还有 Kimi K3 模型权重。这也标志着 Kimi K3 技术报告正式发布。
这些技术细节均可从技术报告中了解：
- KDA + AttnRes：跨层信息借助块级注意力残差得到更充分的流动；长上下文的高效建模，则由 KDA 和 Gated MLA 按 3:1 混合完成。
- Stable LatentMoE：在极高稀疏度条件下，训练稳定性由 SiTU-GLU 和 Quantile Balancing 共同维持；每个 token 会激活 896 个路由专家中的 16 个。
- MoonViT-V2：在不进行对比预训练的情况下，视觉编码器以 next-token prediction 从零启动训练；其优化过程更稳定，效果则达到 SigLIP 初始化基线。
- 后训练与评估：完整评估覆盖近 20 个内部评测集，强化学习基建支持百万 token 上下文；大规模任务合成则面向通用推理、通用 Agent、编程 Agent 三大领域展开。
上述内容仅为概览，技术报告已经详细呈现相关论述和消融实验。
![]()
→ 下载 Kimi K3 技术报告
Kimi K3 关键 Infra 技术开源
模型能力背后，离不开训练系统，即 Infra 基础设施层的稳定支撑。今天，我们向大家介绍支撑 Kimi K3 训练的三项 Infra 技术：MoonEP、FlashKDA 和 AgentEnv，覆盖从高性能通信、高性能算子到分布式 RL 环境的关键链路。其中 FlashKDA 此前已开源，MoonEP 和 AgentEnv 则随本次发布正式开源。
- MoonEP：针对超大的细粒度 MoE，我们打造了高性能通信库 MoonEP，使专家并行（expert-parallel）即使面对不均衡通信，依然能够达到极致效率。
- FlashKDA：FlashKDA 是我们实现的 Kimi Delta Attention 高性能算子（kernel）。在英伟达 H20 上，相比 flash-linear-attention 基线，它的 prefill 速度提升 1.72-2.22 倍，可以直接作为 flash-linear-attention 的替换后端。
- AgentEnv：为应对大规模并行的 Agent 工作流和训练任务，我们与 KVCache.ai 合作开发了 AgentENV。该沙箱系统面向 Agent 环境的大规模运行，可为 Kimi K3 后训练构建高保真且强隔离的空间，并灵活提供分叉（fork）、恢复及快速快照等能力。
支撑 Kimi K3 训练效率和稳定性的关键，正是这三项技术。如今将其开放，希望能够帮助你训练下一代模型。
→ MoonEP GitHub仓库
→ FlashKDA GitHub仓库
→ AgentENV GitHub仓库我们为什么选择开放我们始终相信开放权重模型具有重要价值：它们既能降低获取智能的门槛、促进创新，也能让用户对数据拥有更大的控制权、隐私保护和所有权。过去几周，我们欣喜地听到 AI 社区以及怀有共同愿景的技术领袖发出许多支持声音。我们认为，AGI 是一项影响深远的技术，广泛而开放的生态系统最适合作为它生长的土壤。因此，我们会继续贡献自己的力量。
↓快速开始
- 下载 Kimi K3 模型权重
- 阅读 Kimi K3 技术报告
- 了解 MoonEP 技术
- 了解 FlashKDA 技术
- 了解 AgentEnv 技术
- 了解 Kimi K3 模型
登录查看剩余 70% 内容
