Mistral AI·· 6 小时前精选AI 评分80
Mistral 发布 Voxtral 3 语音智能体 SDK 及多语言语音模型
Voxtral 3
AI 导读
Mistral AI 正式推出 Voxtral 3,这是一套包含端到端语音模型与智能体 SDK 的产品组合,旨在解决实时多步骤对话中的延迟与准确性问题。该方案通过 LiveKit 构建的 SDK,将听、想、说三个环节整合为单一实时流式管道,支持在通话中执行身份验证、账单查询或预约预订等多步操作,同时提供欧盟托管 API 和本地化部署选项以满足数据主权需求。
技术细节上,Voxtral 3 系列包含多个专用模型:Voxtral Small Transcribe 3 在多语言转写和说话人分离(diarization)任务上达到 SOTA,优于 Whisper 和 Gemini 3.5 Transcribe;Voxtral Mini TTS 3 拥有 4B 参数,支持 35+ 语言和 50+ 方言的情感自适应合成。定价方面,Mini 转写模型按分钟计费为 $0.0035/min,TTS 服务为 $13/1M 字符,官方声称其运行成本低于 OpenAI TTS-1 和 ElevenLabs Flash。
推断层面,这种将转录、推理、发声拆分为独立组件的架构设计,允许开发者在不重写代码的情况下替换底层 LLM 或语音模型,显著提升了系统的可维护性和灵活性。猜测层面,虽然官方强调了对低资源语言的支持,但实际商业落地效果仍取决于其在复杂噪音环境下的抗干扰能力以及本地化部署后的算力成本结构。
推荐理由
Voxtral 3 将语音交互拆解为独立模型流水线,并明确列出 $0.0035/min 等定价,可直接用于评估语音 Agent 的单位经济模型。
来源:Mistral AI · mistral.ai