縮小‘表現力差距’:Mistral的Voxtral TTS如何通過混合自迴歸與流匹配架構重新定義多語言語音克隆
Mistral AI發佈了Voxtral TTS,這是一個約4B參數的多語言語音合成模型,通過結合自迴歸生成和流匹配兩種範式,在零樣本語音克隆中勝率超過ElevenLabs Flash v2.5達68.4%,支持9種語言,僅需3秒參考音頻即可生成自然、保説話人特徵的語音。文章詳細介紹了其架構、訓練後優化及在語音代理、有聲書流水線等場景的應用。
縮小‘表現力差距’:Mistral的Voxtral TTS如何通過混合自迴歸與流匹配架構重新定義多語言語音克隆
本文僅提供摘要
根據來源內容權限,本站僅提供編輯摘要、要點和原文連結。