您尚未登录/注册
首页>数码
显存不够傲腾凑!纯CPU跑2.8万亿参数Kimi K3:差点把主板烧了
快科技 2026-11-09 20:54:07

快科技11月9日消息,近日一位Reddit网友成功在纯CPU环境下,跑通了月之暗面拥有2.8万亿参数的顶级模型Kimi K3。

令人意想不到的是,支撑这一庞然大物运行的核心并非动辄数万元的顶级显卡,而是早已被英特尔放弃的第二代傲腾持久内存(Optane PMem 200)。

要知道Kimi K3作为万亿级参数的巨型模型,其运行门槛极高,即便经过极度压缩的量化处理,也至少需要610GB的内存空间。

在当前内存价格持续走高的背景下,通过传统DDR4/DDR5内存堆砌出如此容量的代价极其昂贵。但如果选择使用二手傲腾持久内存作为替代方案,其成本仅为同容量普通内存的几分之一。

在具体的硬件部署上,该玩家使用了一颗40核心的第三代英特尔至强可扩展处理器。核心组件是第二代傲腾持久内存200系列,该产品于2020年随第三代至强发布,单条容量可选128GB至512GB。

在App Direct模式下,傲腾内存被直接映射为独立的持久化内存区域,让软件能更精准地控制模型张量的存放位置。

不过傲腾虽然性能强,发热量也相当夸张。这种持久内存满载时功耗很高,这位玩家郑重提醒:主动散热是硬性要求,不能省。

测试里他直接上了两台12W大功率涡轮风扇对着内存位猛吹。他表示,如果缺少这套强散热,傲腾释放的高温足以烤坏旁边的普通内存,严重时还会把主板插槽直接烤熔。

在实际的推理表现方面,这套系统的表现只能用慢如老牛来形容。在1位(1-bit)量化下,推理速度仅为0.85 Token/秒,而当精度提升至3位量化时,速度进一步下降到0.75 Token/秒。

这意味着生成一段5万Token的任务可能需要耗时13小时以上。这种速度对于实时对话毫无意义,但对于不追求时效性的深夜离线批处理任务,却是一种极具性价比的方案。

【版权声明】本文内容来源于快科技,版权归原作者及原媒体所有。本站仅作信息分享,不构成任何商业用途;如涉版权问题,请联系本站删除。

发布时间:2026-11-09 16:01:12


(第1/1页/共1669字/2阅)
首页>数码
相关数码:
移动硬盘也能用苹果查找!十铨获磁吸与定位两项专利
均价7000块,仍卖断货,3成用户来自苹果,华为Puraxview 凭什么?
多个手机品牌集体降价,现在换是捡便宜还是买“上一代”?关键看你这台手机卡不卡
米家台式净饮机3开箱体验
苹果CEO特努斯回应iPhone Duo屏幕问题
*家园赞助福利回馈活动
网友评论:
更多评论(0)
您的评论:

[热点数码]
“六连板”大涨77%!青岛食品紧急降温:青啤入主还停在磋商阶段
为什么比特币对币安63亿美元黑客攻击事件不以为意
返场的大额存单,没那么香了
【电报解读】三星首款智能眼镜将于今年12月中旬上市,报告预计全球AI眼镜未来5年市场规模年均增长约…
日本芯片龙头股大跌15%
[精彩推荐]
卡塔尔冲刺赛惊魂!后方车手超车失误,世界冠军当场起飞,连人带车翻滚
一顿升职宴,两张体验券,三个好兄弟,到底是真心还是算计?
大爷还怪贴心的《走马上任》
开口瞬间就被打动,难怪粉丝都说听完心里暖暖的|王牌对王牌第 8 季
徐浩,退休6年后被查