发生了什么
11月11日,百度文心大模型发布ERNIE 5.5 Flash Preview。它基于此前开源的ERNIE 5.5 Flash Base,是这条产品线的第一个后训练版本,也就是从“只做过预训练的基座”变成了可以直接对话、写代码、执行任务的成品模型。
据IT之家报道,该模型的API已在百度智能云千帆平台上线,模型权重将在11月25日前开源。官方称它在编程、3D建模、知识工作和内容创作等方面表现突出,并在多项基准测试中取得了有竞争力的成绩,同时保持很快的解码速度。
关键细节和数据
- 规模:总参数280B,每个Token激活14B,属于稀疏混合专家(MoE)架构,支持100万Token上下文。
- 底子:据百度此前公布的基座模型资料,ERNIE 5.5 Flash Base从零开始在33.5万亿Token上预训练,训练上下文逐步扩展到128K,微调和推理支持1M;网络共43层(1层稠密加42层MoE),每层有512个路由专家,每次选取10个,外加1个共享专家。
- 基座成绩:在百度给出的同尺寸开源基座对比里,ERNIE 5.5 Flash Base的MMLU-Pro为78.4,DeepSeek-V4-Flash-Base为69.2;HumanEval+为82.3,LiveCodeBench为40.1,均领先所列的对比模型。需要注意,这些是基座模型的成绩,不是Preview版本的成绩。
- 定价与速度:据TPS报道,该模型已通过千帆接入OpenRouter,标价为每百万输入Token 0.28美元、每百万输出Token 1.13美元;百度描述的速度为每秒200个Token以上,而OpenRouter在11月10日实测的吞吐约为每秒99个Token。
官方也承认“还没练完”
百度明确表示,Preview只是后训练过程中的一个中间版本。虽然在同尺寸模型里已经有竞争力,但仍可能存在训练不充分导致的能力缺陷。后训练还在进行,团队会根据Preview在真实场景中的表现和用户反馈,在后续正式版中继续优化。
这种“边训边放”的发布节奏,在国内外开源模型里越来越常见:先把可用的中间版本交给开发者,用真实反馈加速迭代,而不是闭门打磨到最后。
为什么重要
280B总参数、14B激活这个档位,正是当下开源MoE模型竞争最激烈的区间,DeepSeek、腾讯、小米等都有同级别产品。激活参数小意味着推理成本低,适合大规模部署和智能体这类需要反复调用模型的场景;百万上下文则让它能一次读进整个代码仓库或长文档。
对百度来说,先开源基座、再快速推出后训练版并承诺开源权重,是在开发者社区重新争取存在感的一步。如果正式版能把基座阶段的优势延续下来,开源模型的选择又会多一个有力的候选。
影响和展望
接下来有两个时间点值得关注:一是11月25日前的权重开源能否如期兑现、采用什么许可;二是Preview之后正式版的基准成绩和真实使用口碑。对想要自部署的团队而言,现在可以先通过千帆或OpenRouter的API上手测试,同时用自己的任务去检验官方宣称的速度和效果。
参考来源
- IT之家:百度文心发布 ERNIE 5.5 Flash Preview 模型,11 月 25 日前开源权重
- ERNIE官方:ERNIE 5.5 Flash Base 发布说明
- Hugging Face:baidu/ERNIE-5.5-Flash-Base
- TPS:ERNIE 5.5 Flash Preview: 280B MoE, 1M Context
发布者:极致前沿,转转请注明出处:https://www.veryin.com/4548.html