MAI-Voice-2 - 微软推出的新一代文本转语音模型

发布于 2026-06-03 · MAI-Voice-2 是微软推出的新一代文本转语音(TTS)模型,是微软迄今最具表现力和自然感的语音合成模型。相比前代在保真度、语言覆盖、说话人一致性和情感范围上全面提升,支持 15+ 种语言,具备细粒度情感控制、零样本语音克隆和代码切换能力。

MAI-Voice-2是什么

MAI-Voice-2 是微软推出的新一代文本转语音(TTS)模型,也是微软目前表现力和自然度最好的语音合成模型。相比前代在保真度、语言覆盖、说话人一致性和情感范围上都做了提升,支持 15+ 种语言,能细粒度地控制情感,也能零样本克隆声音、自然地切换语言。

MAI-Voice-2

MAI-Voice-2的主要功能

  • 多语言自然合成:从只做英语扩展到 15+ 种语言,自然度和表现力不掉。
  • 细粒度情感控制:用情感标签(悲伤、耳语、兴奋、困惑之类)来调语音的情绪。
  • 零样本语音克隆:给 5-60 秒参考音频,就能克隆目标声音,所有语言都支持。
  • 说话人身份稳定:有声书、播客、讲座这类长内容里,说话人特征保持一致。
  • 自然代码切换:印地语-英语、西班牙语-英语这类语言对可以自然混着说,韵律和说话人身份不会跑偏。
  • 角色风格扮演:能扮演励志教练、体育解说员这类特定角色风格。

MAI-Voice-2的技术原理

  • 自研语音基础模型架构:MAI-Voice-2 建在微软自研的语音基础模型上,用的是端到端神经网络语音合成架构。模型会整体理解输入文本,自己适配语调、情感和说话风格,开发者不用大量手动调参就能拿到接近真人的语音。架构和 Azure Neural HD 语音类似,表现力、语言覆盖和说话人一致性上算是一次代际升级。
  • 多语言统一建模:MAI-Voice-2 从 MAI-Voice-1 的英语单语言模型,扩成了支持 15+ 种语言的统一多语言合成系统。声调语言、音高重音语言、重音计时语言、音节计时语言这些不同的音系体系都做过针对性优化,各语言的自然度和表现力都做到和英语同级。
  • 零样本语音克隆(Voice Prompting):零样本克隆只要 5–60 秒参考音频,就能提取说话人身份特征并迁移到目标语言,不用针对某个说话人微调或重新训练。这块靠的是语音提示(Voice Prompting):参考音频编码器提取 speaker embedding,合成时保持音色、语调和韵律一致。

如何使用MAI-Voice-2

  • Azure Foundry 访问:在 Azure Foundry 平台上直接调 MAI-Voice-2 API。
  • 自定义品牌声音:传一段 5-60 秒的参考音频就能创建自定义声音,不用重新训练或微调。
  • 情感标签控制:请求里带上情感标签,就能控制输出语音的情绪风格。
  • 授权申请:语音克隆要先申请授权,生产环境只接受经过许可的声音。

MAI-Voice-2的核心优势

  • 音质领先:盲测里有 72% 的情况,用户更偏好它而不是前代 MAI-Voice-1。
  • 真假难辨:说话人相似度很高,合成语音和真人录音基本分不出来。
  • 安全合规:consent 机制在系统层面强制执行,生产环境只认授权许可的声音克隆,未授权的滥用走不通。
  • 长文本稳定:在数小时的长内容中,说话人身份和音质保持一致。
  • 低门槛克隆:不用专业录音棚,也不用大堆训练数据,几秒音频就能复刻声音。

MAI-Voice-2的项目地址

  • 项目官网:https://microsoft.ai/news/mai-voice-2expressive-speech-in-10-languages/

MAI-Voice-2的同类竞品对比

对比维度 MAI-Voice-2 Gemini 3.1 Flash TTS
开发方 微软(Microsoft AI) Google DeepMind
发布时间 2026 年 6 月 2026 年 4 月(Public Preview)
语言支持 15+ 种语言,含代码切换(印地-英、西-英) 70+ 种语言,覆盖更广
预置声音 未明确公布数量,侧重品牌自定义 30 个命名声音(Kore、Puck、Charon 等)
情感控制 细粒度 SSML 标签(悲伤、耳语、兴奋、困惑等) 200+ 内联音频标签([sigh]、[laughing]、[whispering] 等),支持自然语言提示
语音克隆 ✅ 5–60 秒零样本,全语言支持 ❌ 不支持
多说话人 未明确支持 ✅ 单次 API 调用原生支持 2 人对话
长文本稳定性 针对有声书、播客、讲座优化,说话人高度稳定 几分钟以上质量可能漂移,建议分块处理
安全与合规 系统级强制 consent,未授权声音无法生产使用 所有输出带 SynthID 水印,依赖服务条款
音质排名 72% 偏好于 MAI-Voice-1,与真人难区分 Artificial Analysis TTS 排行榜 Elo 1211(第二)

MAI-Voice-2的应用场景

  • 智能助手:给 Copilot、各类应用、设备和客服中心配品牌专属声音。
  • 娱乐内容:给游戏、播客、有声书、AR/VR 做角色声音和旁白。
  • 无障碍辅助:给视障用户读文本,也给言语障碍者提供语音替代方案。
  • 教育培训:给在线课程和模拟场景配讲师、虚拟角色的声音。
  • 内容创作:创作者不用进录音棚,也能把文本做成带个人风格的音频。
0

相关文章

0 条评论

后参与评论

暂无评论,来抢沙发。