当整个AI圈还在疯狂堆砌参数量、比拼谁的底座更庞大时,Reflection.ai反手扔出了一款“做减法”的模型。5010亿总参数,但每次推理只调动230亿。老实讲,在“越大越好”的叙事里,这听起来像是一种妥协。但有意思的是,他们赌对了另一个赛道:算账。
本周,这家机构正式公开了开源模型Beam。主打代码生成、复杂推理和智能体工作流。没有遮遮掩掩的营销话术,直接摊牌:性能上,它正逼近Qwen 3.8-Max;但在推理成本上,它能用GLM-5.2三到四倍的算力节省,把效率拉满。
砍掉95%的数据,才换来1.8万亿的“精粮”
别以为小参数等于低门槛。Beam的预训练是一场极其苛刻的数据大扫除。团队喂给模型的,是23.8万亿个经过筛选的高质量token。常规做法是来者不拒,但他们偏要挑刺。解析、去重、清洗后,整整95%的互联网原始语料被直接扔掉。
更狠的是,他们自己训练的过滤器,硬是从垃圾堆里扒出了约1.8万亿高质量token。这些是主流开源数据框架 routinely 会漏掉的代码和技术文档。
“我们几乎训练了网络上所有公开且无限制许可的代码。”
为了撑住这个体量,他们在不到四周内,跑满了6144块NVIDIA GB300 NVL72 GPU。最终模型的损失曲线平滑得像一条直线,中途九次半自动回滚全靠内置的静默数据损坏检测系统兜底。好利用率死死咬住92.3%。 个人觉得,这种对基础设施的偏执,才是真正拉开差距的地方。
让AI学会闭嘴,比让它多说话难多了
预训练只是打底,真正的杀手锏在高算力强化学习。Beam的训练环境里,塞进了超过一百万个合成与筛选过的任务池。10.5K块GB300连续狂奔四周,砸出超1亿条rollout轨迹。
异步策略梯度放大了一个致命问题:经验会过期。生成的token如果隔了一天才进训练器,策略早就变了。Beam团队搞出新算法,硬是让模型在一天前的过时数据里也能稳定收敛。
最妙的是控制长度惩罚。早期RL阶段,模型完成同样任务用的token越来越少;后期能力上去后,增加的长度又切实带来了性能跃升。用户现在能直接调节推理努力程度参数,想快就快,想深就深。
说实话,现在的很多大模型最大的毛病就是废话多。Beam通过数学奖励学会了克制。不冗余、不幻觉、不强行续写,这在企业级部署里,就是实打实的省钱。
承认落后,反而赢麻了?
把Benchmark表格往上一摆,争议不可避免。评论区一眼就能看出端倪:在绝对能力上,Kimi K3、DeepSeek V4.1 Flash确实还领先。有海外网友直言参数更大运行更贵指标全输。
Reflection没玩文字游戏。博客原文明确写道前沿开源模型如Kimi K3在原始能力上仍占优,Beam的优势在于推理时的效率。
这点我不太认同那些嘲讽它不如国产模型的论调。在一家新入局者敢公开承认短板、并精准定位效率替代规模的市场里,这反而是种清醒。开源世界的规则从来不是招鲜吃遍天,而是快速迭代。当大家还在卷参数量级时,它已经把战场转移到了每token的智能密度上。
服务器里的隐形战争
高算力RL背后,是一套不敢声张的基础设施暗战。平均11万并发rollout、71次推理故障不中断训练、权重分发中位数仅需12秒。他们用RoCE跨机架传权重,本地靠NVLink接力,跨机架流量直接砍掉75%。动态打包让GPU负载长期维持在99.99%满载。
安全对齐也没落下。双教师蒸馏、对抗性提示词挖掘、三层原则约束。非可验证奖励下,行为塑造预测相关系数高达0.79。这意味着他们能提前算准模型会被塑造成什么样,而不是盲目开盲盒。
这种底层架构的打磨,往往比算法论文里的公式更枯燥,但也更致命。没有它,再好的RL设计也只是空中楼阁。
Beam只是系列产品的第一弹。本月Apache 2.0协议将正式解锁全部权重与技术报告。西方开源阵营终于补齐了最后一块拼图。当竞争从谁嗓门大变成谁跑得久算得省,生态的活水自然就来了。下一个版本,他们会把主动激活的参数压到多少?或者说,效率的尽头,真的是规模化吗?
【锐评】:不吹参数吹效率,敢认落后敢切赛道,开源模型终于从军备竞赛回到了商业本质。
参考链接:
https://reflection.ai/blog/introducing-beam