本文にスキップ
AI News HubLIVE
要約のみ

「表現力のギャップ」を埋める:MistralのVoxtral TTSが自己回帰とフローマッチングのハイブリッドアーキテクチャで多言語音声クローンを再定義

Mistral AIがVoxtral TTSを発表。約4Bパラメータの多言語テキスト読み上げモデルで、自己回帰生成とフローマッチングを組み合わせ、9言語でゼロショット音声クローンにおいてElevenLabs Flash v2.5に対して68.4%の勝率を達成。最短3秒の参照音声から自然な音声を生成し、単一H200で30以上の同時ユーザーをサブ600msレイテンシで処理。アーキテクチャ、DPOによる後訓練、ユースケースを詳述。

ソースMarkTechPost著者: Asif Razzaq
「表現力のギャップ」を埋める:MistralのVoxtral TTSが自己回帰とフローマッチングのハイブリッドアーキテクチャで多言語音声クローンを再定義
誤りを報告

訂正窓口はまだ利用できません。記事情報をコピーして保存できます。

訂正案内

要約のみ

配信元のコンテンツ権限に基づき、編集要約、要点、原文へのリンクのみを提供します。

要点と分析を開く

記事インテリジェンス

エンジニア上級

要点

  • Voxtral TTSはハイブリッドアーキテクチャを採用:意味的一貫性に自己回帰デコーダー、音響表現力にフローマッチングトランスフォーマー。特にヒンディー語やスペイン語などの低リソース言語で競合を凌駕。
  • ゼロショットでの言語間音声適応を微調整なしでサポート。オープンウェイト(CC BY-NC 4.0)またはAPI(1,000文字あたり$0.016)で利用可能。
  • DPOによる後訓練で単語誤り率が低下し自然性が向上したが、ヒンディー語ではわずかに悪化。

要点と分析は自動生成され、誤りを含む場合があります。原典をご確認ください。