月之暗面于7月16日发布 Kimi K3，总参数量2.8万亿，是目前全球参数最大的开源模型。在第三方评测 Frontend Code Arena 中，K3 以1679分排名第一，超过 Claude Fable 5（1631分），上一代 Kimi K2.6 以1515分排在第18位。

K3 的底层架构包含两项核心创新。

Kimi Delta Attention（KDA）是一种混合线性注意力机制，配合 Attention Residuals（注意力残差）技术。这两项设计的目标是让信息在更长的序列和更深的