ARTICLE / DEEP READING

新闻中心

从比赛现场到数据趋势,深入阅读每一篇值得关注的体育内容。

Kimi K3.1 Pro 正式开源,本地部署 800 万元起步,阿里云超节点 Day0 适配文章配图
READ
IN DEPTH

FEATURED ARTICLE

Kimi K3.1 Pro 正式开源,本地部署 800 万元起步,阿里云超节点 Day0 适配

省流:本地部署 Kimi K3.1 Pro 最低 800 万元起步,推荐配置 3000 万元,请转给公司领导申请预算 大家好,我是 Ai 学习的老章 前两天我实测了 Kimi K3.1 Pro: 也测了它与 DeepSeek、Opus 5.5 和 GPT-6 的同台表现: 大家有各种看法,但我觉得: 你可以说它慢,说它贵,但是不能说它菜 今天月之暗面如约开源了 K3.1 Pro 的完整权重,阿里云也宣布灵骏真武 M890 超节点完成 Day0 适配 今年 7 月 K3 开源时我算过一笔账 当时结论是按照英伟达 H200 来测算的,跑满得 8 台超节点,预算直奔 3000 万(现在H200可不是这个价了) 如今 K3.1 Pro 权重发布,本地部署到底要几台机器、多少预算?老章再来算一下 K3.1 Pro 与 K3 架构区别 K3.1 Pro 底层骨架基本继承 K3,提升全在后训练与跨领域强化学习 架构是 2.8T 总参数的稀疏 MoE,支持 100 万 Token 上下文窗口 权重原生 MXFP4,实测大小 1.56TB(96 个分片): 注意力延续 KDA 线性注意力与 DSA 稀疏注意力结合的混合架构,支持多 Token 预测(MTP),兼顾长上下文显存与吞吐 月之暗面把算力砸在大规模后训练(Post-training)与跨领域联合 RL 上,重构了从训练、推理到沙箱评测的全栈工程,效果很显著: Terminal-Bench 4.0 上,K3.1 Pro 拿下 65.7%,超越 GPT-6 Astra 的 58.2%,紧咬 Claude Opus 5.5(66.4%) Kimi Code Bench 3.0 从 55.95% 升至 61.2%,还同步推出提速 2 到 3 倍的 Highspeed 版本 Kimi K3.1 Pro 评测榜单表现 阿里云超节点 Day0 适配 今天阿里云灵骏真武 M890 超节点宣布 Day0 适配 K3.1 Pro,并在 vLLM 与 SGLang 两个框架上跑通了全链路验证 软硬件协同全链路优化架构 跑万亿 MoE,瓶颈在跨卡与跨机通信,阿里云、平头哥与月之暗面联合做了深度调优: FlashMLA 算子调优,降低高并发访存开销 DeepGEMM 算子优化,加速 MoE 低精度矩阵计算 MegaMoE 与 MoonEP 优化拓扑,压低 All-to-All 延迟抖动 大家最关心的问题:本地私有化部署,到底买几台 M890?花多少钱? 我搜了一下近期的招投标信息,发现了这一条: 电信陕西分公司寻源公告显示,32 台真武 M890 含税预算 11942.76 万元,扣除管理机后单台均价约 373 万元 (实际成本不得而知,这个数字虚高了,里面应该还有 4 台通算服务器部分): 单台搭载 8 张 OAM 加速卡,单卡 144GB HBM 显存,整机显存合计 1152GB(约 1.15TB) 片间互联带宽 800GB/s,配合自研 ICN Switch 1.0 支持 64 卡全带宽互联 K3.1 Pro 权重是 1.56TB,单台 M890 显存只有 1.15TB,单台连权重都装不下 多机部署需要加上 400GE RDMA 交换机(单台约 70 万元,我随便问的集成商,应该也虚高),老章整理出三档账单: Kimi K3.1 Pro 本地部署成本台账 方案一:两台 16 卡配置,约 820 万 — 850 万元(入场券) 两台 M890 共 16 张卡,总显存 2304GB(约 2.25TB) 装下 1.56TB 权重后剩余约 744GB 显存供 KV Cache 与运行时周转,长上下文和并发量需要精打细算 2 台真武 M890 服务器:约 746 万元 1 台 400GE 交换机及配件:约 70 万 — 100 万元 最低门槛合计:约 820 万 — 850 万元 方案二:四台 32 卡配置,约 1600 万元(舒适档) 四台 M890 共 32 张卡,总显存 4608GB(约 4.5TB) 权重外结余近 3TB 显存,可支撑 100 万 Token 长上下文与企业级稳定并发 4 台真武 M890 服务器:约 1492 万元 400GE 交换机与网络:约 100 万 — 150 万元 企业生产推荐合计:约 1600 万元 方案三:八台 64 卡超节点,约 3100 万 — 3200 万元(官方推荐姿势) 月之暗面技术博客明确说了:建议在 64 卡以上超节点配置上部署,正好对应平头哥 ICN Switch 1.0 的 64 卡全带宽互联域 8 台 M890 聚合 64 张卡,总显存来到 9216GB(约 9.2TB),跨节点算力完全释放 8 台真武 M890 服务器:约 2984 万元 400GE 集

about image

SHARE THE IDEA

觉得有用?分享给朋友

让更多人看到这篇内容。

返回资讯列表

YOU MAY ALSO LIKE

推荐阅读

TRENDING STORIES

热点新闻

皇马更衣室点名夸两人:一个像队长,一个像换了个人

皇马更衣室点名夸两人:一个像队长,一个像换了个人

据西班牙六台节目《El Chiringuito》记者胡安费·桑斯透露,皇马更衣室内部对 楚阿梅尼 和 居莱尔 给出了格外高的评价,理由是两人的职业态度和个人成长。 桑斯表示,楚阿梅尼正通过自己的行动逐渐成为更衣室里的领袖。尽管他没有正式佩戴队长袖标,却被视为一个类似队长的人物,其职业态度赢得了认可。桑斯说:“他们对他赞不绝口。”他特别提到,楚阿梅尼经常在健身房加练,用自己的身体准备为队友做出表率。

他从部委被拟任空军副政委被驳回,升为国计委副主任,仍想回军队

他从部委被拟任空军副政委被驳回,升为国计委副主任,仍想回军队

在新中国成立初期,由于缺乏人才、政治运动、维护稳定等多方面的原因,中央从军队抽调了不少干部到行政或地方上工作。对于这些打了大半辈子仗的人来说,离开部队是非常难过的事情,后续只要有机会一定会尽全力重返军旅,不过有的人可以轻松如愿,有的却要经历诸多波折。 比如开国少将邓东哲,他在建国伊始奉命转到空军,当慢慢适应新军种的节奏后,又被抽调至工业交通部。军人以服从命令为天职,即便这道命令是褪去军装他也只能服

越南的耻辱!女子与美国大兵亲热后,趴床上满脸崇拜地看着他

越南的耻辱!女子与美国大兵亲热后,趴床上满脸崇拜地看着他

1968年,南越西贡,一间靠近美军驻地的简陋屋舍里,一名越南女子坐在床边,望着刚刚脱下军装的美国士兵。这样的画面,后来常被报刊和照片放大,仿佛一个女人的眼神,就能解释整场战争。 可战争从来不是一张照片那么简单。 许多越南妇女并没有真正选择生活的余地。丈夫被征召入伍,兄弟死在前线,家里的米缸见底,孩子发烧却买不起药。美军基地周围出现酒吧、餐馆和临时住处,一些当地女性在那里谋生。有人是为了养活家人,有

10轮后领跑的拉齐奥遭打击:队长伤停3到4周

10轮后领跑的拉齐奥遭打击:队长伤停3到4周

意甲领头羊拉齐奥将失去队长扎卡尼数周。据天空体育意大利等媒体报道,初步检查显示他左大腿肌肉出现损伤。 扎卡尼在上周末 2比1 战胜卡利亚里的比赛中一瘸一拐被换下,当时外界以为只是硬伤。进一步检查仍需进行,以确定损伤程度,但这类伤病通常需要 三到四周 的恢复期。 这意味着扎卡尼确定缺席本周末与那不勒斯的联赛焦点战,下一场对阵莱切也很可能无法出战。本赛季他在意甲出场 10次 ,贡献 2球5助攻 。 对

某媒体对2027年的神预测,让人脊背发凉…

某媒体对2027年的神预测,让人脊背发凉…

对于很多喜欢深度思考的人来说,平时做研究学习的时间,远多于做交易的时间。 上场下单眼疾手快,研究功夫全在场外。 一旦研究,都需要深度阅读各种信息媒体。其中一定包括这本多次给大家推荐过的老牌国民纸媒。 有多优秀? 它曾三次非常准确地预测了未来。 第一次,2003年非典时期,很多人认为中国的经济会高速跌落,但是它却告诉大家,中国经济正处于大爆发的前夜。 当然很多人不信,但那些极少数相信的人就抓住了20