月之暗面发布 Kimi K3:2.8万亿参数开源模型,被评为当前开源最强编码模型
中国 AI 公司月之暗面发布 Kimi K3,2.8万亿参数成为全球最大开源模型,百万 token 上下文窗口,前端编码评测超越 Anthropic Fable 5。阿里腾讯加持,估值冲击300亿美元。
7月16日,中国 AI 公司月之暗面(Moonshot AI)发布了 Kimi K3 大语言模型。这个拥有 2.8 万亿参数的模型,刷新了全球开源模型的规模纪录——比 DeepSeek V4 Pro 的 1.6 万亿还大了约 75%。
性能方面,Kimi K3 交出了一份让人意外的答卷。 在前端编码评测 Frontend Code Arena 上,它以 1679 的 Elo 分登顶,超过了 Anthropic 的 Fable 5。在编码和 GPU 优化等单项测试中,甚至领先美国头部模型。不过月之暗面也坦言,综合表现并未完全超越 Fable 5,只是在多个关键基准上与之持平。
Kimi K3 的技术亮点不少:百万 token 上下文窗口、原生视觉理解能力、始终开启的"思考模式"。架构上引入了 Kimi Delta Attention(混合线性注意力机制)和 Attention Residuals(注意力残差连接)两项创新,均已在 GitHub 上开源。
价格是另一把利器。 月之暗面将 Kimi K3 定位为"前沿能力、非前沿定价",直指美国同行的溢价空间。模型权重将于 7 月 27 日全面开放。
这家由杨植麟(前 Google、Meta 研究员)2023 年创立的公司,已从阿里巴巴和腾讯获得约 15 亿美元融资。今年 1 月 DeepSeek R1 横空出世后,Kimi 月活从第三跌至第七,此后全面转向开源策略。K3 是这场战略转型的成果。
据悉,月之暗面正寻求以 300 亿美元估值募集 20 亿美元,并计划在港交所上市。前白宫 AI 顾问戴维·萨克斯在社交媒体上称这一突破"令人担忧",并警告"如果我们给自己设限,世界其他地区不会陪我们玩规则游戏"。