Hunyuan3D 2.0 - テンセントが立ち上げた大規模3Dアセット生成システム。

Hunyuan3D 2.0とは何ですか？

Hunyuan3D 2.0は、Tencentが開発した大規模3Dアセット生成システムで、テキストや画像から高解像度の3Dモデルを生成することに特化しています。このシステムは2段階の生成プロセスを採用しており、まずテクスチャのない幾何モデルを生成し、次に高解像度のテクスチャマップを合成します。コアコンポーネントとして、Hunyuan3D-DiT（幾何生成モデル）とHunyuan3D-Paint（テクスチャ合成モデル）の2つがあり、それぞれ正確な幾何構造と鮮やかでリアルなテクスチャの生成に使用されます。

Hunyuan3D 2.0の主な機能

• 高解像度3Dモデル生成この2段階の生成プロセスでは、まずテクスチャのない幾何学的モデルを生成し、次にそれに対応するテクスチャマップを合成することで、形状生成とテクスチャ生成の複雑さを効果的に分離します。
• 高品質な生成効果幾何学的詳細度、条件付きアライメント、テクスチャ品質の点で、既存のオープンソースおよびクローズドソースのモデルを凌駕する性能を発揮します。
• 多様な使用方法コード呼び出し、Gradoアプリ、Blenderプラグイン、および公式サイトからの迅速なアクセスをサポートしています。

Hunyuan3D 2.0の技術原理

• 2段階生成プロセスHunyuan3D 2.0は、まずジオメトリを生成し、次にテクスチャを生成するという2段階の生成戦略を採用しています。この分離により、形状生成とテクスチャ生成の複雑さを効果的に分離しつつ、生成されたジオメトリモデルや手作業で作成されたジオメトリモデルに対して柔軟なテクスチャ処理を提供します。
• 幾何学的生成モデル（Hunyuan3D-DiT）Hunyuan3D-DiTは、フローベースの拡散モデルであり、与えられた条件に画像を正確に一致させる幾何学的モデルを生成します。Hunyuan3D-ShapeVAEを使用して3D形状を連続潜在コードにエンコードし、その後、2ストリームおよびシングルストリームのTransformerアーキテクチャに基づいて拡散モデルをトレーニングします。
• テクスチャ生成モデル（Hunyuan3D-Paint）Hunyuan3D-Paintは、強力な幾何学的および拡散に関する事前知識に基づいて、生成されたメッシュモデルまたは手作業で作成されたメッシュモデル用の高解像度で鮮やかなテクスチャマップを生成します。マルチビュー拡散生成スキームを使用し、幾何学的条件（法線マップや位置マップなど）を組み合わせてマルチビュー画像を生成し、それを高解像度テクスチャに焼き付けます。
• パフォーマンス最適化Hunyuan3D 2.0は、幾何学的ディテール、条件付きアライメント、テクスチャ品質において優れており、既存のオープンソースおよびクローズドソースモデルを凌駕しています。評価結果によると、生成品質の面で他のベンチマークモデルを大幅に上回っています。

Hunyuan3D 2.0 オープンソース モデル

• Hunyuan3D-2mv これは、Tencent Hunyuan 3Dがオープンソース化したマルチビュー形状生成モデルです。このモデルは、マルチビュー入力による高品質な3D形状の生成に重点を置いており、シーンやオブジェクトを複数の角度から理解する必要がある3D制作に適しています。
• Hunyuan3D-2miniこれはHunyuan3D-2mvの簡略版です。コア機能は維持しつつ、モデルサイズと計算効率を最適化することで、軽量アプリケーションにより適したものとなっています。
• Hunyuan3D-DiT-v2-0これは、画像から高精細でテクスチャのない幾何モデルを生成するために使用される大規模な幾何生成モデルです。フロー拡散ベースのモデルを使用して構築されており、入力画像に正確に一致する幾何を生成します。このモデルは26億個のパラメータを持っています。
• Hunyuan3D-Paint-v2-0これは、生成されたジオメトリや手作業で作成されたメッシュに対して、高解像度でリアルなテクスチャマップを生成するために使用される大規模なテクスチャ生成モデルです。このモデルは13億個のパラメータを持っています。
• Hunyuan3D-Delight-v2-0: は、入力画像を光と影のない状態に変換し、不変の照明を持つテクスチャマップを生成するために使用される画像美化モデルです。
• Hunyuan3D-DiT-v2-0-Fastこれは、ガイド付き蒸留技術によって推論時間を半減させた、ジオメトリ生成モデルの高速化バージョンであり、生成速度に対する要求が高いシナリオに適しています。

Hunyuan3D 2.0 プロジェクトアドレス

• プロジェクト公式サイト：3d-models.hunyuan.tencent.com
• GitHubリポジトリ：https://github.com/Tencent/Hunyuan3D-2
• ハギングフェイスモデルライブラリ：https://huggingface.co/tencent/Hunyuan3D-2

Hunyuan3D 2.0の応用シナリオ

• ゲーム開発Hunyuan3D 2.0は、ゲーム開発の効率を大幅に向上させることができます。ジオメトリとテクスチャ生成モデルを通して、キャラクター、小道具、シーンなどの高品質な3Dゲームアセットを迅速に生成できます。
• UGCソーシャルとコンテンツ作成Hunyuan3D 2.0はユーザー生成コンテンツ（UGC）をサポートしており、ユーザーはテキストの説明、画像、スケッチなどを使用して、個人の3Dアバターやバーチャルギフトなどのパーソナライズされた3Dモデルをすばやく生成できます。
• 電子商取引と広告eコマース分野において、Hunyuan3D 2.0は製品画像から高精度の3D製品モデルを迅速に生成し、オンラインでの表示やインタラクションを可能にすることで、ユーザーエクスペリエンスを向上させます。
• 工業製造および設計Hunyuan3D 2.0は、設計スケッチやコンセプト図から工業製品の3Dプロトタイプを迅速に生成し、設計検証やデモンストレーションに活用できます。生成されたモデルは複数のフォーマット（STL、USDZなど）に対応しており、3Dプリンティングツールとシームレスに統合できます。
• 地図ナビゲーションTencent Mapsは、Hunyuan3D 2.0をベースにしたカスタム3Dナビゲーションカーアイコン機能をリリースし、作成効率を91%向上させました。この機能により、ユーザーは好みに合わせてパーソナライズされた3Dカーアイコンを作成でき、地図ナビゲーションの視覚体験がさらに豊かになります。
• 教育と科学研究Hunyuan3D 2.0はオープンソースのモデルとコードを提供し、教育者や研究者の教育・研究活動を支援します。学生が3Dモデリングをより深く理解し、実践するための教育ツール開発に活用できます。