Make-It-Animatable - USTCとテンセントによる共同イニシアチブで、アセット準備のためのリアルタイムアニメーションを自動生成する。

Make-It-Animatableとは何ですか？

中国科学技術大学とテンセントPCGが共同開発したデータ駆動型フレームワーク「Make-It-Animatable」は、形状やポーズに関わらず、あらゆる3Dヒューマノイドモデルを1秒未満でキャラクターアニメーション用に準備できます。このフレームワークは、メッシュや3Dガウスブロブなど、さまざまな3D表現をサポートし、高品質なブレンドウェイト、スケルトン、ポーズ変換を生成します。粗密な表現と構造を考慮したモデリング戦略に基づき、非標準的な骨格構造を持つキャラクターでも、高い精度と堅牢性を実現します。既存の手法と比較して、Make-It-Animatableは品質と速度の両面で大幅な改善を実現しています。

Make-It-Animatableの主な機能

• リアルタイムアニメーションの準備形状やポーズに関係なく、あらゆる3D人型モデルをアニメーションに使用できる状態に素早く変換します。
• アニメーションアセットを自動生成する高品質なボーン、ブレンドウェイト、ポーズ変換を自動的に生成し、アニメーション制作に必要なデータを提供します。
• 複数の3Dデータ形式に対応3Dメッシュや3Dガウス斑点など、さまざまな3Dデータ表現をサポートします。
• 細かいものから粗いものまで、多段階表現細かいものから粗いものへと段階的に表現していく多段階表現法を用いることで、モデルの重要な領域における詳細を捉える能力が向上する。
• 構造を考慮したモデリング非標準的な骨格構造を識別して適応できるため、モデルの適応性と精度が向上します。

Make-It-Animatableの技術的原則

• 粒子ベースの形状オートエンコーダ粒子ベースのオートエンコーダー技術は、3D形状をエンコードおよびデコードし、さまざまな3D表現をサポートします。
• 粗密表現戦略まず、形状と関節位置を大まかに予測し、その後、予測を精緻化して精度を向上させる。
• 構造を考慮した骨格モデリング骨格のトポロジーを考慮することで、特に複雑な骨格構造において、骨格予測の精度を向上させることができる。
• ハイブリッド重み付けと骨の位置予測深層学習技術を用いて各頂点の混合重みと骨の位置を予測し、正確なスキニングを実現する。
• 姿勢変化の予測: モデルの現在の姿勢から標準的な休息姿勢への変化を予測し、さまざまなアニメーションを適用できるようにする。

Make-It-Animatableプロジェクトのアドレス

• プロジェクト公式サイト：jasongzy.github.io/Make-It-Animatable
• GitHubリポジトリ：https://github.com/jasongzy/Make-It-Animatable
• arXiv技術論文：https://arxiv.org/pdf/2411.18197
• オンラインでデモを体験してください：https://make-it-animatable.jasongzy.com/

Make-It-Animatableの応用シナリオ

• ビデオゲーム開発ゲームキャラクターのアニメーションを迅速に生成できるため、ボーンやスキニングの手動調整作業の負担を軽減し、ゲーム開発の効率を向上させることができます。
• 映画およびテレビ制作映画やテレビシリーズのCGキャラクターアニメーション制作において、アニメーションのリアリティを高め、制作速度を向上させるために使用されます。
• 仮想現実（VR）と拡張現実（AR）VRやARアプリケーションでは、リアルな3Dキャラクターを素早く生成でき、ユーザーエクスペリエンスを向上させることができます。
• アニメーション映画とシリーズアニメーション制作会社は、高品質なアニメーションシーケンスを迅速に作成できるため、時間とコストを節約できます。
• シミュレーションおよびトレーニングソフトウェア軍事または医療シミュレーションソフトウェアにおいて、シミュレーション訓練用のリアルなキャラクターの動きを迅速に生成するために使用される。