模型与研究

Moonshot 正式放出 Kimi K3 开放权重,2.8 万亿参数模型进入可下载阶段

Moonshot 于 7 月 27 日公开发布 Kimi K3 的模型权重与技术报告,宣布这款 2.8 万亿参数、原生多模态并支持 100 万 token 上下文窗口的模型可下载并用于自托管。公司强调架构改进(KDA、AttnRes 与 Stable LatentMoE)与长上下文、多模态应用场景,但实际自托管门槛和资源成本仍然很高。

Moonshot 正式放出 Kimi K3 开放权重,2.8 万亿参数模型进入可下载阶段

Moonshot 于 7 月 27 日公开发布 Kimi K3 的模型权重与技术报告,宣布这款 2.8 万亿参数、原生多模态并支持 100 万 token 上下文窗口的模型可下载并用于自托管。公司强调架构改进(KDA、AttnRes 与 Stable LatentMoE)与长上下文、多模态应用场景,但实际自托管门槛和资源成本仍然很高。

月之暗面(Moonshot AI)7 月 27 日正式公开 Kimi K3 的模型权重和技术报告,兑现了其在上月发布模型时给出的时间表。公司在 官方技术博客Hugging Face 模型页 中把 Kimi K3 描述为一款 2.8 万亿参数、原生多模态、支持 100 万 token 上下文窗口的开放权重模型,并称其为“首个 open 3T-class 模型”。

这次发布延续了 Moonshot 7 月中旬的预告。按官方说法,Kimi K3 已可在 Kimi.com、Kimi Work、Kimi Code 和 Kimi API 上使用,而完整权重则在 7 月 27 日开放下载。平台文档进一步显示,Kimi K3 的 API 采用顶层 reasoning_effort 机制,默认开启 thinking mode;模型定价为每百万 token 缓存命中输入 0.30 美元、缓存未命中输入 3 美元、输出 15 美元。Moonshot 还表示,Kimi K3 采用 Kimi K3 License 发布。

从“更大”到“更开放”

从技术叙事看,Moonshot 试图证明 Kimi K3 不只是参数更大。官方博客和模型卡都强调,Kimi K3 基于 Kimi Delta Attention(KDA)和 Attention Residuals(AttnRes),并使用 Stable LatentMoE 框架,在 896 个专家中每个 token 只激活 16 个;公司称,这使其相较 K2 的整体扩展效率提升约 2.5 倍。Hugging Face 模型页还列出 104B activated parameters、93 层、2 个 shared experts 以及 160K 词表等细节。

Moonshot 把这套架构与长上下文编程、知识工作和多步推理绑定在一起,官方博客称 Kimi K3 能在较少人工干预下持续处理长工程任务、浏览大型代码库,并配合截图和视觉反馈完成前端、CAD 和游戏开发等工作。公司还在技术博客中列出 GPU kernel 优化、编译器开发、科研工作流和视频编辑等案例,试图把“开放权重”包装成一套面向开发者和企业用户的生产力工具。

公开下载,但自托管门槛仍然不低

尽管 Moonshot 把 Kimi K3 定位为开放权重模型,实际部署门槛并不低。Reuters 在 7 月 17 日的报道中写道,Kimi K3 是“世界上最大的开放权重 AI 系统之一”,并称其性能在部分基准上已经逼近 Anthropic 的前沿模型;但报道同时指出,2.8 万亿参数的体量意味着大多数用户不太可能在本地自行托管。Quartz 引述 Bloomberg 的说法也提到,Moonshot 计划在权重公开后让开发者自由下载、部署和改造该模型。

Moonshot 对外强调的,也是“可下载”与“可自托管”带来的生态效应,而不是单纯的规模竞赛。公司公开的模型卡页面同时提供了 Tech BlogFull Report 入口,显示这次发布并不只是一组权重文件,而是一次围绕架构、训练和评测的完整包装。另有一篇转引 Moonshot 官方微信内容的整理稿称,公司在“Open Day”同步释放了 Kimi K3 模型权重、技术报告,以及 MoonEP、FlashKDA 和 AgentEnv 等训练基础设施相关技术。

对月之暗面来说,这不仅是技术发布

Kimi K3 的开源,也再次把月之暗面推回到中国前沿模型竞争的中心。AIFlux 早前在 Moonshot 发布 Kimi K3:2.8 万亿参数模型把开源前沿再往前推了一步 中已经追踪过这场技术发布,而 Kimi 有望最快 6 个月内港股上市 则显示,模型能力、产品增长和资本市场预期正在被放进同一条叙事线里。

在 Reuters、BBC 和 Moonshot 官方材料共同拼出的这条时间线上,Kimi K3 的意义已经不只是“又一个更大的模型”。它代表的是一种更明确的选择:通过开放权重争取开发者,通过长上下文和多模态能力争取实际使用场景,再把这些技术进展转化成商业化和估值叙事。对于月之暗面而言,7 月 27 日这一步,既是模型发布的收尾,也是下一轮竞争的起点。

来源

不错过任何一条 AI 大事

订阅 AIFlux 早报,每天 3 分钟看懂产业动态。

相关阅读