project
LeVo - テンセントAIラボが開発したAI歌唱モデル
LeVoは、Tencent AI Labsが開発したAI歌唱モデルです。強力な音色クローン機能を誇り、膨大な学習データを必要とせず、わずか3秒の音声データから、ピッチ、感情、リズムを含むターゲット音色を正確に再現します。LeVoはトラックごとの生成にも対応しています。
LeVoとは何ですか?
LeVoは、Tencent AI Labsが開発したAI歌唱モデルです。強力な音色クローン機能を誇り、わずか3秒の音声データで、ピッチ、感情、リズムを含むターゲット音色を正確に再現します。膨大な学習データは不要です。LeVoは、ボーカルと伴奏トラックを別々に生成するトラック生成機能をサポートしており、ポストプロダクションでの編集を容易にします。その技術アーキテクチャは、言語モデル(LM)をベースとしており、LeLMと音楽コーデックを組み合わせてトラックを並列生成します。音質は業界最高水準に近く、歌詞のアライメント機能も非常に優れています。
LeVoの主な機能
-
ゼロサンプル音色クローニングわずか3秒の音声クリップで、大量の学習データを必要とせずに、音高、感情、リズムを含む目標とする音色を正確に再現できる。
-
トラック生成LeVoはデュアルトラック生成モードをサポートしており、ボーカルトラックとインストゥルメンタルトラックを別々に生成できるため、ポストプロダクションでのミキシングや編集においてより高い柔軟性を提供します。
-
高忠実度音楽再生LeVoは、業界最高水準に近い音質を実現しており、特に音楽性、ボーカルと伴奏のハーモニー、そして総合的な音質(MOSスコア)において卓越しています。マルチプリファレンス調整方式により生成結果を最適化し、様々なスタイルやシーンにおいて高忠実度を保証します。
LeVoの技術原則
- 言語モデルアーキテクチャLeVoは言語モデル(LM)アーキテクチャを採用しており、LeLMと音楽コーデックを組み合わせることで、高品質な音楽を並列に生成します。
LeVoのパフォーマンス
-
多くの主要指標において、業界トップクラスのSuno 4.5に匹敵する性能を誇る。
-
歌詞の配置(LYC)に関しては、LeVoはSuno 4.5よりも0.21ポイント高いスコアを獲得し、優れたテキスト制御機能を示した。
LeVoのプロジェクトアドレス
- プロジェクト公式サイト:https://levo-demo.github.io/
LeVoのアプリケーションシナリオ
-
ソロ音楽クリエイター音楽制作が好きだが専門的なスキルを持たない個人ユーザー向けに、敷居が低く高品質な音楽制作プラットフォームを提供する。
-
プロの音楽プロデューサー楽曲生成機能と高忠実度音楽再生機能は、創作効率と品質を向上させることができます。
-
音楽教育機関これは、生徒に生き生きとした興味深い音楽教育体験を提供するために活用できる。