Wonder Animation - 動画シーケンスを3Dアニメーションシーンに変換するAIソリューション。

ワンダーアニメーションとは何ですか？

AutodeskのWonder Dynamicsが開発した革新的なAIテクノロジー「Wonder Animation」が、Wonder Studioでベータ版として利用可能になりました。ビデオから3Dシーンへの変換技術をベースとするWonder Animationは、ビデオシーケンスを3Dアニメーションシーンに変換し、アニメーション映画制作を加速させます。マルチ編集ビデオや異なるショットを含むビデオにも対応し、AIを用いて3D空間でシーンを再構築します。カメラ、キャラクター、環境の相対的な位置と動きを一致させることで、すべてのカメラ設定とキャラクターアニメーションを含む仮想シーンを作成します。Wonder Animationを使用することで、アーティストはあらゆるシーンをCGキャラクターを含む3D環境に変換しながら、完全なクリエイティブコントロールを維持でき、制作効率の向上と参入障壁の低減を実現します。

ワンダーアニメーションの主な機能

• 動画から3Dシーンへの変換動画シーケンスを3Dアニメーションシーンに変換することで、アニメーション映画の制作を加速させる。
• マルチ編集とショット処理複数のクリップと異なるショット（広角、中距離、クローズアップなど）を含むビデオシーケンスを撮影および編集できます。
• AIがシーンを再構築AI技術に基づき、カメラ、キャラクター、環境の相対的な位置と動きを正確に一致させ、シーンを3D空間で再構築する。
• 仮想シーンの作成カメラ設定、キャラクターの体の動き、顔の表情アニメーションなどを含む仮想シーンを作成します。
• 完全に編集可能な要素Maya、Blender、Unrealなどのお好みのソフトウェアで、アニメーション、キャラクター、環境、ライティング、カメラトラッキングデータを完全に編集できます。
• クリエイティブコントロール自動出力に依存する生成型AIツールとは異なり、Wonder Animationはアーティストの創造的なコントロールを重視し、アーティストが自身の創造的なビジョンを形作ることを支援します。

ワンダーアニメーションの技術的原理

• ビデオキャプチャと分析カメラを使用して、複数のクリップや異なるショットを含むビデオシーケンスをキャプチャします。
• ディープラーニングとコンピュータビジョンディープラーニングとコンピュータビジョン技術を用いて、動画内の動作やシーンを分析し、登場人物、カメラの位置、環境要素を特定します。
• 3D空間再構築AIアルゴリズムを用いて、登場人物、カメラ、環境の正確な位置と動きを含め、ビデオシーンを3D空間で再構築する。
• データ照合と同期再構築された3Dシーンは、元のビデオデータと照合され、動作とシーン間の同期と一貫性が確保されます。
• 出力と統合再構築された3Dシーンを、Maya、Blender、Unreal Engineなどの3Dソフトウェアで編集可能な形式で出力することで、アーティストがより簡単かつ効率的に作成・調整できるようにします。
• クラウドレンダリング技術クラウドレンダリング技術を活用することで、効率性を向上させ、ローカルのコンピューティングリソースを解放し、アニメーション制作プロセスを加速させる。

ワンダーアニメーションのプロジェクトアドレス

• プロジェクト公式サイト：wonder-animation-video-to-3d-scene-technology

ワンダーアニメーションの応用事例

• アニメーション映画制作従来のアニメーション映画制作において、これはキャラクターアニメーションの制作プロセスを加速させ、物理的なモーションキャプチャ機器の必要性を低減させる。
• ビデオゲーム開発ゲーム開発者は、実写映像をゲーム内の3Dアニメーションシーンに素早く変換することで、ゲーム環境やキャラクターのリアリティを高めることができる。
• バーチャルプロダクション映画やテレビ番組の制作では、俳優がグリーンスクリーンやLEDウォールの前で演技する際に、仮想環境との相互作用をリアルタイムで確認できるように、仮想の背景や環境が作成される。
• 拡張現実（AR）と仮想現実（VR）AR（拡張現実）やVR（仮想現実）アプリケーションでは、リアルな3D環境やキャラクターを生成し、ユーザーエクスペリエンスを向上させます。
• 広告とマーケティング広告主は、魅力的な3Dアニメーション広告を迅速に作成することで、広告の視覚的なインパクトを高めることができます。