基础篇
进阶篇
高频篇
精选篇
手写篇
面经篇
AI 篇
原理篇
每日一题
小程序题库
  • 知识卡片碎片时间过考点
  • 场景篇按分类整理的大前端场景考点
  • 历年面经按年份追踪真实考点
  • 算法题库NEW在线编码即时判题
  • 专项自测100 题快速查漏
  • 前端基础
    • HTTP从报文一路讲到 HTTPS
    • 浏览器渲染、事件循环、进程
    • 计算机基础Linux、网络、操作系统
  • 进阶专项
    • 设计模式23 种模式怎么用
    • 前端系统进阶学习大型项目工程化
    • 前端综合文章长期沉淀的实践文
  • 工程与工具
    • Node学习指南从环境搭建到服务端
    • NPM工作流script、依赖与发布
    • Docker容器化部署上手
    • Canvas图形与动画实战
  • 路线与导图
    • 思维导图知识点全景图
    • 学习路线按图索骥不跑偏
  • 动态
    • 公众号动态公众号历史文章
    • 博客动态站长的技术博客
    • 开发者导航常用工具与文档站
    • AI 热点每日 AI 资讯与动向
AI 工作台
简历
旧版
AIHT
内容
精选全部 AI 动态热点榜AI 日报收藏
分类
模型行业编程产品技术观点开源
更多
Agent 接入
返回首页开发者导航
AIHT
精选 / 资讯详情
9.0
重磅
AI SCORE
模型发布2026-11-06 12:35

Kimi K3.1 Pro 开放权重,部署门槛多高

dev.to · AI#Kimi#开放权重#模型部署
Editor brief · 编辑速览

据素材介绍,Kimi K3.1 Pro 已开放约 1.56TB 权重,总参数 2.8 万亿、每 token 激活 1040 亿,支持约百万 token 上下文。文章列出多卡部署与量化显存需求,并指出尚无 GGUF 版本,建议缺少集群资源的开发者使用 API。

文章思维导图
Knowledge map
拖拽缩放
AI deep read

AI 深度解读

Kimi K3.1 Pro 开放权重,给开发者增加了部署选择,但不等于普通团队已经适合自托管。原文的核心建议很实际:下载前先算硬件和账单,再核对许可证、搭建评测,最后决定是否迁移。

这份清单值得读的地方,是把「模型能下载」拆成了几项工程决策。下面的发布时间、规格和成绩均按原文转述,其中跑分来自厂商,独立验证仍待补齐。

104B 活跃参数,为什么仍要准备集群

据原文,Moonshot AI 于 2026 年 11 月 4 日在 Hugging Face 发布完整权重,兑现发布时的承诺。仓库名为 moonshotai/Kimi-K3.1-Pro,共 96 个文件、1.56 TB,无访问审批门槛。

模型总参数为 2.8 万亿,每个 token 激活 1040 亿参数。它采用混合专家架构(MoE),共有 896 个专家,每个 token 选择 16 个。稀疏激活减少的是每步计算量,部署仍要容纳庞大的权重,不能按 104B 模型估算机器。

原文给出的最简 vLLM 方案需要 8 张数据中心 GPU;2-bit 精度约需 861 GB 显存,4-bit 约需 1,509 GB。文中没有展开这些估算的运行配置,采购前还要核算上下文缓存、并发和框架开销。截至原文发布时,Hugging Face 尚无 GGUF 构建,作者因此认为消费级 GPU 路线还未就绪。

模型支持 1,048,576-token 上下文和最多 131,072-token 输出,通过 4.01 亿参数的 MoonViT-V2 编码器处理视觉,接受文本、图片和视频,输出文本。权重采用 MXFP4,并经过量化感知训练,也就是训练时已经考虑 4-bit 精度,并非训练结束后才压缩。

还要分清版本:速度快 2–3 倍的 Kimi K3.1 Pro Highspeed 没有独立权重仓库。此次下载只覆盖基础 Pro,Highspeed 仍需走 API。

跑分接近对手,为什么还不能直接迁移

Moonshot 报告的 Terminal-Bench 4.0 成绩为 65.7%,对照 Claude Opus 5.5 的 66.4% 和 GPT-6 Astra 的 58.2%;LiveBench 综合成绩为 71.3,测量日期是 2026 年 10 月 26 日。

这里有一处影响判断的前提:Moonshot 在 Claude Code 的运行框架中测试自家模型,对手成绩则取自已发表报告。这些数字可以作为线索,但不是同一环境下的独立对照实验。

迁移依据应该是自己仓库里的任务通过率。

作者建议先整理 10 个真实任务,写清可信的通过与失败标准,再接入自己的评测框架。对前端和全栈团队,可以选已有验收条件的组件修复、Node 接口改动或跨文件重构,观察模型是否真正完成任务。

开放权重让评测摆脱了按 token 计费的约束,但不代表测试免费。GPU、运行环境和评测维护仍有成本。原文也没有提供作者在自家代码库上的实测结果,这是一套评测建议。

API 与自托管,先把两笔账算清楚

按原文价格,Kimi API 每百万输入 token 为 2 美元,输出为 10 美元,缓存输入为 0.20 美元。开放权重没有改变价格;模型也已进入 Kimi.ai、Kimi Work 和 Kimi Code。

作者用这组费率算了两个例子:

  • 一次较重的编码 Agent 会话,输入 200,000 token、输出 20,000 token,费用为 0.40 + 0.20 = 0.60 美元。
  • 小团队每月输入 50M、输出 10M token,费用为 200 美元;若输入充分命中缓存,输入费用降至 10 美元,总计为 110 美元。

第二个数字有明确前提:按上述费率算到 110 美元,相当于这 50M 输入全部按缓存价计费。实际账单取决于可缓存内容和命中情况。

自托管则要承担 GPU、闲置容量和维护费用。作者倾向于「先用 API,把权重保留为评测、议价和未来部署的选项」。这是合理的决策方向,但原文没有提供完整的集群报价、吞吐测量或盈亏平衡点,不能据此断定所有团队使用 API 都更便宜。

许可证也是部署成本的一部分。Kimi K3.1-Pro License 被描述为类似 MIT:允许使用、复制、修改、微调和销售,要求保留版权声明;大型托管方和超大规模产品另有条件。原文未列出具体门槛,商业落地前必须查看条款本身。

此外,这是开放权重,训练数据和训练代码没有公开,不能直接称为完整开源。

我的判断

这篇清单最有价值的,是把关注点从排行榜拉回硬件、成本、许可和验收标准。对于已经使用编码 Agent 的团队,公开权重确实增加了选择空间。

但它仍是一份部署前的建议,不是自托管实测报告。显存数字缺少配置细节,跑分等待独立验证,成本案例只是按公开费率做的算术。

作者预计未来几天会出现 GGUF、量化实验和微调版本,这属于预测。关于模型使用 GPT-6 Astra 输出训练的说法,原文明确标为未经证实的传闻,也不应拿来评价模型来源或能力。文末列出的参考材料包括模型卡和 2026 年 10 月 24 日的技术博客,文章自身并未完成独立审计。

能拿来做什么

  • 先从仓库挑出 10 个有明确验收条件的真实任务,让当前模型与 K3.1 Pro 使用一致的工具权限和验证命令,记录完成情况与费用。
  • 根据现有 Agent 的输入、输出和缓存用量重算月账单,把 200 美元和 110 美元当作算例,避免直接套用。
  • 准备自托管时,先确认 GPU、目标上下文和并发需求,再核对 vLLM 配置与许可证条件,最后安排 1.56 TB 权重下载。
  • 如果业务依赖 Highspeed 的速度,继续按 API 方案评估;此次基础 Pro 权重不能直接提供它所宣称的加速。
Original source

本文由 AI 通读原文后重新编写,观点部分为站内判断,细节以原文为准,来源 dev.to · AI,原文版权归原作者所有。

阅读原文
上一篇
离线助手记忆更新:相似度只负责召回
下一篇
把智能体约束落实到工具调用检查

资讯速览

dev.to · AI · 2026-11-06 12:35

AI 评分 9.0 / 10

相关标签

#Kimi#开放权重#模型部署

继续阅读

  • 从开源实现提炼智能体框架能力清单
  • 离线助手记忆更新:相似度只负责召回
  • 把智能体约束落实到工具调用检查
  • 智能体审计应记录工具操作的授权依据
  • 用代码知识图谱减少智能体反复搜索