欧洲AI团队 Mistral 发布首个开源AI音频模型 Voxtral
作者: CBISMB
责任编辑: 宋慧
来源: ISMB
时间: 2025-07-16 15:02
关键字: 大模型,音视频,音频大模型,Mistral ,Voxtral
浏览: 176
点赞: 0
收藏: 0
作为首个可投入生产的开源语音智能模型,Voxtral 解决了开发者此前在“低成本但低精度开源工具”与“高性能但封闭昂贵系统”间的两难选择。
欧洲法国的AI公司 Mistral 于 2025 年 7 月 15 日 正式发布 Voxtral,这是其首个面向企业的开源音频模型系列。该模型旨在挑战封闭式企业系统(如 OpenAI 等)的主导地位,提供开放、经济高效的替代方案。
Mistral 宣称 Voxtral 是首个能够在实际应用中提供 “真正可用的语音智能” 的开源模型。这意味着,开发者不再需要在低成本的开源系统和高效但封闭的解决方案之间做艰难选择。Voxtral 以其 “不到一半价格” 的优势,为企业提供了一个更加经济的选择。
据 Mistral 介绍,Voxtral 可以转录长达30分钟的音频。由于其基于大型语言模型 Mistral Small3.1,用户能够理解最长可达40分钟的音频内容。用户不仅可以提出与音频内容相关的问题,还能生成摘要,甚至将语音指令转化为实时操作,如调用 API 或执行特定功能。此外,Voxtral 还具备多语言支持,能够理解和转录英语、西班牙语、法语、葡萄牙语、印地语、德语、荷兰语和意大利语等多种语言。
Mistral 提供了两种 “语音理解模型” 的变体。首先是 Voxtral Small,拥有240亿个参数,适用于生产级部署,并与 ElevenLabs Scribe、GPT-4o-mini 和 Gemini2.5Flash 等竞争。其次是 Voxtral Mini,具有30亿个参数,适用于本地和边缘部署。还有一个超经济版的3亿参数模型,称为 Voxtral Mini Transcribe,专为转录场景优化,其性能承诺超越 OpenAI 的 Whisper,价格却不到其一半。
用户可以通过 Hugging Face 免费下载 Voxtral 的 API,或在 Mistral 的聊天机器人 Le Chat 中进行测试。根据公司的说法,API 的集成费用从每分钟0.001美元起。此次发布恰逢 Mistral 一个月前推出的推理模型 Magistral,这些模型通过逐步解决问题来提高可靠性。
作为欧洲顶尖的人工智能公司之一,Mistral 一直以来积极推动开源 AI 模型的发展。值得一提的是,近期有消息称 Mistral 正在与投资者洽谈,计划筹集高达10亿美元的资金,其中包括阿布扎比的 MGX 基金。