AB
AB
AiBoss

すべてのカテゴリ

project

WorldGen - Meta社のエンドツーエンド3Dワールド生成システム

WorldGenは、Meta社の最新の高度なエンドツーエンドシステムで、単一のテキスト入力からインタラクティブでナビゲーション可能な3Dワールドを生成します。ユーザーは「中世の村」や「火星基地」などの説明を入力するだけで、システムが…

WorldGenとは何ですか？

WorldGenは、Metaが開発した最新の高度なエンドツーエンドシステムで、単一のテキスト入力からインタラクティブでナビゲーション可能な3Dワールドを生成します。ユーザーは「中世の村」や「火星基地」といった説明を入力するだけで、システムは50m×50mの範囲をカバーする、一貫性のある構造化された仮想ワールドを数分以内に生成できます。手続き型推論、拡散モデル、オブジェクト指向のシーン分解に基づいて、WorldGenで生成された3Dワールドは、追加の変換なしに、UnityやUnreal Engineなどの主流ゲームエンジンと直接互換性があります。WorldGenは、従来の3Dコンテンツ制作の複雑なワークフローに革命を起こし、コンテンツ制作を民主化することを約束します。

WorldGenの主な機能

  • テキスト生成3Dワールドユーザーは「サイバーパンク都市」や「中世の村」といった簡単なテキストを入力するだけで、WorldGenは数分で完全な3D世界を生成できます。
  • インタラクティブでナビゲーション可能モデルによって生成された3Dワールドでは、キャラクターはラグや通行不能なエリアなしに自由に移動したり、相互作用したりすることができる。
  • スタイルの一貫性モデルによって生成される世界は、スタイルとテーマにおいて一貫性を保っている。例えば、中世の場面には現代的な要素は一切現れない。
  • 合理的な構造異なるエリアは、全体の連続性と機能性を確保するために、通行可能な手段で接続されている。
  • 主要なゲームエンジンと互換性があります生成された3Dアセットは、追加の変換を行うことなく、UnityやUnreal Engineなどの主要なゲームエンジンに直接インポートできます。
  • 大規模な世界生成のサポート現在は50メートル×50メートルのシーンを生成できますが、将来的にはより大規模な世界にも対応する予定です。

WorldGenの技術原則

  • プログラムによるレイアウト生成大規模言語モデル（LLM）を使用することで、テキストプロンプトは手続き的に生成されるパラメータに変換され、地形、空間分割、主要構造物を含むシーンの大まかなレイアウト（ブロックアウト）が生成されます。
  • 画像から3Dへの再構成生成されたレイアウトに基づいて、深度条件を通して参照画像が生成され、画像から3Dへの拡散モデルを使用してシーン全体の形状が再構築される。
  • シーン分解この機能は、単一の3Dメッシュを複数の独立したオブジェクト（建物、樹木など）に分割し、後でそれらをより細かく編集しやすくします。
  • オブジェクトの強化細部の描写と視覚効果を向上させるため、各オブジェクトに対して個別の画像補正、幾何学的形状の精緻化、およびテクスチャ生成が行われます。
  • ナビゲーションメッシュの制約生成プロセスにおいて、ナビゲーションメッシュはシーンへのアクセス性を確保し、キャラクターがシーン内を自由に移動できるようにします。
  • 多段階最適化プロセス全体は、計画、再構築、分解、強化の4つの段階に分かれており、生成される世界の質と機能を段階的に向上させていく。

WorldGenのプロジェクトアドレス

  • プロジェクト公式サイト：https://www.meta.com/blog/worldgen-3d-world-generation-reality-labs-generative-ai-research/
  • 技術論文：https://scontent-sea1-1.xx.fbcdn.net/v/t39.2365-6/586830145_834419405978070_3937417229378696315_n.pdf?_nc_cat=104&ccb=1-7&_nc_sid=d65b48&_nc_ohc=KjIRxfgDxfAQ7kNvwEUbcRV&_nc_oc=AdkyeBfeCoX5Y2sIxaeN_wzTJOo3BvhPhYFDsCuN2XdGW60PPHW5-cPauGTZ7kjcmN6LymJ7ZXAcfyjoy5mlGra1&_nc_zt=14&_nc_ht=scontent-sea1-1.xx&_nc_gid=3tX278lz5_LpF7k9qDsxvQ&oh=00_Afjv87PRMbBTzjkRBOHUekl_YD8a0iIEvaJu8RrnvKr7vg&oe=6926DA80

WorldGenの応用シナリオ

  • ゲーム開発ゲームシーンの初期バージョンを迅速に生成できるため、従来のモデリング時間を節約し、動的なコンテンツ生成とパーソナライズされたゲーム体験をサポートします。
  • 仮想現実（VR）と拡張現実（AR）VRおよびARアプリケーション向けに、トレーニング、シミュレーション、教育体験に使用される没入型仮想環境を生成します。
  • 映画およびアニメーション制作映画やアニメーションの仮想シーンを素早く生成できるため、監督やアートチームがクリエイティブなアイデアを迅速に評価するのに役立つ。
  • 教育と訓練このモデルは、歴史再現、科学シミュレーション、技能訓練のための仮想シナリオを生成することができ、教育効果とインタラクティブ性を向上させる。
  • 建築設計と都市計画建物や都市計画の仮想モデルを迅速に生成できるため、設計者や計画担当者が選択肢を評価するのに役立ちます。
戻る