ElevenLabs与英伟达扩大合作:Nemotron进入ElevenAgents,语音智能体走向国家级部署
核心概要
ElevenLabs与英伟达扩大合作,把英伟达Nemotron开放模型接入ElevenAgents语音智能体平台,并计划在现有Blackwell Ultra系统之上追加15兆瓦Vera Rubin算力。在ElevenAgents面向真实客服任务的基准上,Nemotron 3.5 Super VL取得领先的端到端任务完成准确率,成本比其他领先开放模型低70%。双方同时把语音智能体用于波兰国家电子健康平台的中央预约系统,在本地部署中让公民数据和音频留在政府基础设施内。
深度剖析
ElevenLabs的对话式智能体平台ElevenAgents现在可以直接调用英伟达的Nemotron开放模型,企业可以把推理模型与ElevenLabs的低延迟多语言语音模型组合成一套模型系统来构建语音智能体。 这次扩大合作把英伟达的模型、基础设施和安全部署一并带入ElevenAgents平台,而Nemotron此前并不在该平台可用的模型之列。 在ElevenAgents面向真实客服任务的基准上,Nemotron 3.5 Super VL取得领先的端到端任务完成准确率,在财务计算和账单分析上表现较强,成本比其他领先开放模型低70%。
ElevenLabs计划在现有英伟达Blackwell Ultra系统之上追加15兆瓦的下一代英伟达Vera Rubin算力,用于支撑对安全和数据驻留有严格要求的大规模部署,并让研究团队使用优化后的算力。 新增容量针对的是最大客户日益增长的需求,而不是替换现有基础设施。 两家公司自2022年起合作,ElevenLabs首个文本转语音模型在英伟达GPU上训练,英伟达自2024年起用ElevenLabs技术为英伟达各大活动上的50多场视频生成配音,2025年英伟达成为ElevenLabs的战略投资方。
在波兰,ElevenLabs的模型与英伟达基础设施驱动中央电子预约系统Centralna e-Rejestracja的语音智能体,由EasyCall支持交付,智能体致电只有固定电话的患者提醒就诊并协助改约。 该部署在本地运行并使用英伟达机密计算,使公民数据和音频留在政府基础设施内并在处理过程中受到保护,本地部署也降低了实时公共服务的延迟。 波兰国家电子健康平台每年有4000万次预约,爽约率为10%到20%,因此即使小幅减少错过就诊也能明显改善就医可及性。
启示与展望
已展示的范围包括ElevenAgents平台上的模型接入、ElevenAgents客服任务基准上的对比结果、计划追加的15兆瓦Vera Rubin算力,以及波兰中央预约系统的本地部署;面向机器人、车辆和工业机械的端侧语音AI被描述为潜在未来应用。
基准结果只针对ElevenAgents平台上面向真实客服任务的评测,成本低70%是相对其他领先开放模型的比较;波兰部署的收益以每年4000万次预约和10%到20%爽约率为背景,材料未给出实际减少幅度;端侧语音AI的应用被表述为可能方向。
