简介
10月21日,IBM在Hugging Face发布了Granite Speech 5.0的三款更新:全新的granite-speech-5.0-2b,以及修订版的granite-speech-5.0-470m-turboctc与granite-speech-4.1-2b-plus。三款全部以Apache 2.0协议开源,可商用、可定制,原生支持Transformers。
最有说服力的一组数字:2B版在公开英文短音频测试集上的平均词错率(WER)为5.06%,在开源权重ASR模型里排第二(按Open ASR Leaderboard统计,截至2026年10月21日)。
三款模型分别解决什么问题
granite-speech-5.0-2b:准确率与翻译
- 参数规模与前代4.1-2b相同,训练数据为39万小时公开音频加合成数据(针对日语ASR、关键词偏置和翻译专门构造)。
- 支持英语、法语、德语、西班牙语、葡萄牙语、日语六语种转录,并在这些语言间与英语双向翻译,另支持英语译意大利语和中文。
- 新增语种ID提示:在prompt里指明输入语言,可显著提升多语种转录准确率。
- 新增关键词偏置:最多2000个词的列表,让产品名、人名、缩写在各语种下都能正确输出。
- 可按需输出标点与大小写,大小写F1在IBM测试集上为89.7—99.5。
- 支持Transformers、vLLM、llama.cpp,以及Apple Silicon的mlx-audio。
granite-speech-5.0-470m-turboctc:速度与端侧
从8月的纯英文版升级为七语种(英、日、西、德、法、意、葡),内置标点与大小写(省掉后处理步骤),对混响房间与远场录音更鲁棒。速度是把单个Conformer块编译后在整栈复用计算图,热身时间大幅缩短,在Open ASR Leaderboard上达到19,870 RTFx,比发布时约12,600提升约1.6倍,精度不变。
granite-speech-4.1-2b-plus:多说话人场景
架构、prompt格式、API全不变,属可直接替换的权重升级。面向会议、客服通话、长时多说话人访谈:说话人分离错误率(WDER)下降7%,说话人归属词错率(cpWER)整体下降7%,平均时间戳偏移缩减一半以上,长音频WER下降24%,20词关键词列表下的偏置词错误下降45%。
怎么选:一张判断表
- 要高准确率、要翻译、要自定义 vocabulary → 5.0-2b
- 要极致速度、要端侧/实时字幕 → 5.0-470m-turboctc
- 要处理会议、客服、多人访谈 → 4.1-2b-plus
详细分析:开源ASR的拐点到了
5.06%的英文WER是一个关键阈值。两三年前,这个数字是付费云API的专属领地,开源模型通常在8%—15%徘徊。现在开源权重模型能排到第二,意味着对绝大多数企业日常转录任务来说,"必须买付费API"的前提已经不成立。
更重要的是方向:IBM这次的三项升级——关键词偏置、语种提示、说话人归属——全是企业真实痛点,而不是benchmark刷分。会议里说错产品名、跨国团队混说、多人录音分不清谁说的,这三件事恰好是通用ASR最常翻车的地方。相比之下,同期ElevenLabs Chimera走的是"平台+工作流"路线,两者并不冲突:一个做底层能力,一个做上层产品。
注意事项
- IBM官方标注这些基准为"非官方"排名,是基于公开榜单的平均值统计,不等于所有场景都如此。上线前务必用自己的音频实测。
- 中文支持情况需要注意:2B版支持"英语译中文",但中文转录不在六语种列表内。中文场景仍需评估其他方案。
- 三款模型的数据、评测与用法都在各自的model card上,选型前建议先读card确认profile与许可证条款。
优缺点
- 优点:Apache 2.0可商用、准确率进入第一梯队、关键词偏置实用、端侧版本速度极快、生态接入完整(vLLM/llama.cpp/mlx-audio)。
- 不足:中文转录支持弱、基准由厂商自评、轻量版仍以英语训练为主。
总结
如果你在做会议纪要、客服质检、字幕生成这类产品,Granite Speech 5.0 值得直接拉下来实测——它能替掉相当一部分付费ASR账单。模型集合见IBM Granite Speech 5.0工具页。