语音智能体不再逐段等:Voxtral 3 把听、想、说并成一条流,每轮不到一秒
Mistral 发布 Voxtral 3,把语音识别、推理、工具调用与语音合成放进同一条实时流式管线,并配套语音智能体 SDK。此前让智能体同时听准、想清、说自然并跨系统执行多步操作仍很困难。其 Small 转写模型在英语、法语、西班牙语的多语言转写与说话人分离上优于 Whisper、Scribe v2 和 Gemini 3.5 Transcribe,实时转写延迟低于 500 毫秒。
Mistral 发布 Voxtral 3,把语音识别、推理、工具调用与语音合成放进同一条实时流式管线,并配套语音智能体 SDK。此前让智能体同时听准、想清、说自然并跨系统执行多步操作仍很困难。其 Small 转写模型在英语、法语、西班牙语的多语言转写与说话人分离上优于 Whisper、Scribe v2 和 Gemini 3.5 Transcribe,实时转写延迟低于 500 毫秒。
英国上议院首次出现由AI重建的声音完成的议员发言。此前,坎贝尔女男爵自2012年起只能由助手代读讲稿,因为她的发声能力随病情逐渐退化。她自行找到ElevenLabs的声音克隆工具,上传旧录音重建音色、节奏与音高,再用文本转语音生成整篇讲稿,经辅助设备在上议院播放,用于健康法案二读中关于个人健康预算的发言。
开源语音工具 VoiceStudio 把桌面端统一到 Electron,旧 Tauri 外壳与遗留界面入口已移除,此前用 Tauri 版本的用户需要单独安装才能继续使用。
Tacit-TTS 从 IndexTTS2 蒸馏而来,用掩码非自回归生成替换自回归文本到语义解码、引入免训练声学长度的估计并对流匹配渲染器做 ReFlow 蒸馏,在两个英语和两个普通话数据集上取得有竞争力的零样本克隆质量,对超过 5 秒的语句生成速度比 IndexTTS2 快 10 倍以上,且无需参考语音转写即可支持跨语言与非词汇参考。
已读完全部报道