AI 新闻

Hume 推出 Real World VoiceEQ:语音 AI 评测开始从“会说”转向“会听”

Hume 发布 Real World VoiceEQ 基准,基于百万级人工评分评估 40+ 语音模型,强调语音 AI 在自然性、可靠性和理解力上的多维差异,指出竞争正从单一模型性能转向数据、评测与系统化能力。评测显示没有单一系统能覆盖所有能力维度,并提醒自动化评测难以替代主观判断的人类评审。

Hume 推出 Real World VoiceEQ:语音 AI 评测开始从“会说”转向“会听”

Hume 发布 Real World VoiceEQ 基准,基于百万级人工评分评估 40+ 语音模型,强调语音 AI 在自然性、可靠性和理解力上的多维差异,指出竞争正从单一模型性能转向数据、评测与系统化能力。评测显示没有单一系统能覆盖所有能力维度,并提醒自动化评测难以替代主观判断的人类评审。

从单一分数到“能力画像”

Hume AI 在 7 月 14 日发布了新的语音评测基准 Real World VoiceEQ,试图回答一个越来越棘手的问题:语音模型到底是在“像人一样说话”,还是“真的像人一样听懂了” Hume 官方文章 技术报告 PDF 公开排行榜

这套基准覆盖 40 多个主流专有和开源语音模型,横跨文本转语音、语音到语音、语音理解和自动语音识别四大方向,使用超过 100 万条人工评分,其中当前版本包含 785,679 条 TTS 评分和 48,053 条 STS 评分。Hume 的核心结论很直接:语音 AI 的表现高度“维度化”,没有哪一款系统能在所有场景里都稳坐第一。

为什么“听懂”比“听起来像”更难

过去几年,语音模型的字错率持续下降、延迟不断缩短,许多传统榜单也逐渐接近饱和。但 Hume 认为,真正的现实世界对话并不只看转写是否准确。模型还要处理停顿、语气、情绪、说话人身份、背景噪声和长对话稳定性;这些信息大多不会完整出现在文本里。

在这次评测中,Hume 发现一些系统在朗读、角色扮演或表达力上表现出色,却会在数字、药名、长句稳定性或身份保持上掉队;另一些系统则更擅长精确复述,却不够自然。换句话说,语音 AI 已经开始分化成不同专长,而不是朝着一个“万能最佳模型”前进。

这种判断也与 Hume 今年 1 月那篇《Building Voice Models Is No Longer a Modeling Problem》的论点一致:语音模型的竞争重心正在从纯模型结构,转向数据、评测和控制。

这套基准具体看到了什么

在 TTS 部分,Hume 指出没有任何系统同时进入全部七个能力组的前五名;Gemini 3.1 Flash 在表演感和表达力上领跑,而 Gemini 2.5 Pro 在可靠性上更强,Fish Audio S2 则覆盖面更广。STS 部分也呈现出类似的分化:Gemini 3.1 Flash Live 的综合覆盖最广,但依然没有任何系统能包揽所有维度。

更值得注意的是自动语音识别。Hume 说,他们在 11 个模型上都看到了某种形式的“benchmark optimization”迹象,也就是模型可能在公开榜单上刷分,却未必真的提升了对真实声学环境的泛化能力。噪声、情绪、口音和对话式输入,都会让表现显著下滑。

Hume 还强调,自动化评测并不能完全替代人类。对一些答案明确、可验证的任务,speech-language model judges 还能和人工评审保持较高一致性;但一旦进入“像不像同一个人”“适不适合这个角色”这类主观判断,机器就明显不如人类可靠。

语音 AI 的竞争,正在从“模型”走向“系统”

这篇文章的意义,不只在于 Hume 多了一个排行榜,更在于它再次把行业拉回到“真实使用场景”上。语音 AI 正在进入客服、教育、医疗、娱乐和个人助理等更广泛的场景,而这些场景对情绪、语境和连续互动的要求,远比单句转写更高。

这也是为什么谷歌把 Gemini 3.1 Flash Live 实时语音代理 推向低延迟、多模态实时语音场景时,会把噪声鲁棒性、语言覆盖和对话自然度放在前台;OpenAI 则在另一条线上重构 低延迟语音 AI 架构 ,并把 实时语音模型推动智能语音应用 推向更复杂的 voice-to-action 任务。

行业早前的另一个信号来自 Scale AI。今年 3 月,Scale 推出 Voice Showdown,强调要用真实人声和全球用户来评估语音模型。这说明一件事:语音 AI 的竞争已经不再只是“谁说得更像”,而是“谁更能在真实对话里稳定、自然、可靠地工作”。

Hume 的 Real World VoiceEQ 只是把这场转变说得更明确了:未来的语音模型,可能不会先被问“是不是最好听”,而是会先被问“到底听懂了没有”。

不错过任何一条 AI 大事

订阅 AIFlux 早报,每天 3 分钟看懂产业动态。

相关阅读