Lyria 2 - DeepMindのAI音楽生成モデル - AiBoss

Lyria 2とは何ですか？

Lyria 2は、Google DeepMindが開発した第3世代AI音楽生成モデルです。Vertex AIプラットフォームの中核コンポーネントとして、高忠実度オーディオ生成機能を誇り、48kHz/24ビットのプロ仕様ステレオオーディオを出力します。ポップ、ロック、クラシックなど、様々な音楽スタイルに対応し、ジャンルを超えた融合を可能にします。Lyria 2は、Lyria RealTimeモデルを拡張し、リアルタイムでの作成と調整に対応しています。クリエイターは、MIDIコントローラーやマイクを介して、AIによる作曲をリアルタイムでトリガーできます。新機能として、「作成」、「拡張」、「編集」があり、それぞれテキストから音楽スニペットを生成したり、既存のオーディオに基づいて拡張機能を作成したり、オーディオのムードやスタイルを調整したりするために使用できます。

Lyria 2の主な特徴

高忠実度オーディオ生成Lyria 2は、ポップ、クラシック、エレクトロニックなど、さまざまな音楽スタイルに対応できる、プロ仕様の48kHz高忠実度ステレオオーディオを生成できます。
リアルタイムでの作成と調整Lyria RealTimeモデルを拡張し、ユーザーがリアルタイムで音楽を作成・調整できるようにすることで、音楽のスタイル、リズム、感情を瞬時に変更できるため、ライブパフォーマンスや迅速なプロトタイピングに適しています。
テキスト主導の作成新たに追加された「作成」機能により、ユーザーはテキストによる説明や歌詞を使って音楽の断片を生成できるようになり、制作のハードルが大幅に下がりました。
音声継続生成「Extend」機能は、既存のオーディオクリップに基づいて拡張コンテンツを生成し、クリエイターが音楽作品を拡張するのに役立ちます。
音声編集と融合「編集」機能を使用すると、プリセットオプションまたはテキストプロンプトを通じてオーディオの雰囲気やスタイルを調整したり、異なる音楽セグメントをブレンドしたりできます。
デジタル透かし技術Lyria 2で生成されるすべての音楽には、AI生成コンテンツの識別性を確保し、著作権紛争を防止するために、SynthIDウォーターマーク技術が埋め込まれています。

Lyria 2の技術的原理

マルチモーダル入力とパラメータ化制御Lyria 2は、テキスト、MIDI、オーディオクリップなど、複数の入力方法に対応しています。ユーザーは、説明文（「陽気なジャズピアノ曲」など）やパラメーター（BPMやモードなど）を通して音楽生成を制御できます。生成エンジンは、拡散モデルと敵対的生成ネットワーク（GAN）を組み合わせることで、スタイルの分離と再結合を実現しています。
リアルタイムのインタラクションとダイナミックな創造LyriaのRealTime機能は、TensorRTによる高速化とストリーミング推論によって、生成遅延を500ms未満に短縮し、ライブパフォーマンスやリアルタイム制作をサポートします。ユーザーはMIDIコントローラーやマイクを介して、AIが生成した楽曲をリアルタイムで再生できます。
モジュール式作成プラットフォームLyria 2はMusic AI Sandboxに統合されており、メロディー生成からコード生成までモジュール式のツールチェーンを提供し、機能モジュールのドラッグ＆ドロップによる組み合わせをサポートし、創造性のハードルを下げます。

Lyria 2プロジェクトの住所

プロジェクト公式サイト：deepmind.google/technologies/lyria/

Lyria 2の応用シナリオ

プロフェッショナルな音楽制作Lyria 2は、プロ仕様の48kHz高忠実度ステレオオーディオを生成でき、ポップ、クラシック、エレクトロニックなど、さまざまな音楽スタイルに対応しているため、ミュージシャンはBGM、効果音、または完全なサウンドトラックを迅速に作成できます。
インスピレーションユーザーはテキストによる説明（例：「陽気なジャズピアノ曲」）や歌詞を通して音楽の断片を生成することができ、創造性の行き詰まりを打破できる。
映画音楽とテレビ音楽Lyria 2は、スクリプトのキーワードに基づいてシーンの雰囲気に合ったダイナミックなBGMを生成し、リアルタイムでの調整にも対応しているため、制作効率を大幅に向上させることができます。
広告用BGM「ブランドキーワード＋感情タグ」を用いてカスタマイズされた音楽を迅速に生成することで、広告チームは迅速な反復作業とコスト削減を実現できる。
AI音楽コースバークリー音楽大学やスタンフォード大学CCRMAなどの機関と協力し、AIを活用した音楽コースを開発し、音楽教育におけるイノベーションを推進する。