Hunyuan3D-2.1 - テンセント・フンユアンのオープンソース産業グレード3Dジェネレーティブモデル

Hunyuan3D-2.1とは何ですか？

Hunyuan3D-2.1は、TencentのHunyuanチームが立ち上げたオープンソースプロジェクトで、画像から高精細な3Dアセットを生成することに重点を置いています。物理ベースレンダリング（PBR）マテリアル合成機能を備え、金属反射や表面下散乱効果などのリアルなテクスチャやマテリアルを生成します。テキスト、画像、スケッチなど、複数の入力形式に対応し、高品質な3Dモデルを迅速に生成できます。Hunyuan3D-2.1は、モデルの重みやトレーニングコードを含む完全なオープンソースフレームワークを提供し、開発者によるカスタマイズや拡張を容易にします。

Hunyuan3D-2.1の主な機能

• マルチモーダル入力により3Dモデルが生成されるテキストによる説明、単一画像、または複数視点画像から高品質な3Dモデルを生成する機能をサポートしています。例えば、「青いスカーフを巻いたウサギ」と入力すると、対応する3Dモデルが生成されます。
• 高解像度ジオメトリとテクスチャの生成本システムは、形状とテクスチャを分離する2段階生成アーキテクチャを採用しています。まず、テクスチャのない幾何学的モデルを生成し、次に高解像度のテクスチャを合成することで、3Dモデルの幾何学的構造をより詳細に表現し、テクスチャの色彩をより豊かにします。
• 物理ベースレンダリング（PBR）マテリアル合成生成されたテクスチャは、金属の反射や表面下散乱といったリアルな照明効果を備えており、3Dモデルのリアリティを大幅に向上させます。
• 高速形状生成TurboシリーズとFlashVDMテクノロジーを搭載したHunyuan3D-2.1は、1秒で形状を生成でき、軽量ミニモデルであれば0.5秒で生成することも可能です。
• マルチフォーマット対応および3Dプリント対応生成された3Dアセットは、OBJ、GLB、FBX、STL、USDZなどの複数の主要なフォーマットをサポートしており、3Dプリントに直接使用できます。
• 3Dインテリジェント顔認識必要に応じて数百から数千の三角形面を自動的に生成し、幾何学的エッジの滑らかさを最適化し、面の数を減らしながらモデルの詳細を最大限に保持することができます。

Hunyuan3D-2.1の技術原理

• 2段階生成パラダイム：
  • 幾何学的生成段階条件付き拡散モデルを用いて暗黙的なSDF場を構築し、微分可能なマーチングキューブアルゴリズムを用いて明示的なメッシュを出力する。この段階で詳細なモデリングが最適化され、メッシュ精度とトポロジーの一貫性が向上する。
  • テクスチャ合成段階ジオメトリを考慮したUVマッピングネットワークとCLIPビジュアルセマンティックアライメント機構を組み合わせることで、高解像度（4096×4096）のPBR（物理ベースレンダリング）テクスチャを生成します。PBRテクスチャ合成により、金属反射や表面下散乱など、リアルな照明相互作用を持つマテリアルを生成できます。
• マルチモーダル入力とクロスモーダル特徴融合テキスト、画像、スケッチの入力に対応し、マルチモーダルアライメント技術を用いて異なるモダリティの特徴を融合させ、入力条件に非常に近い3Dアセットを生成します。
• 適応型三角形パッチ削減アルゴリズムこのシステムは、適応型面削減機能を備えており、必要に応じて数百から数千の三角形面を生成し、幾何学的エッジの滑らかさを最適化し、モデルの詳細を最大限に保持することができます。
• 高性能と互換性Hunyuan3D-2.1は、生成速度と品質の両面で優れており、Turboシリーズモデルは30秒以内に高精度の3Dモデルを生成します。生成された3Dアセットは、OBJ、GLB、USDZなどの複数の業界標準フォーマットに対応しており、3Dプリントに直接使用できます。

Hunyuan3D-2.1プロジェクトの住所

• プロジェクト公式サイト：https://3d-models.hunyuan.tencent.com/
• GitHubリポジトリ：https://github.com/Tencent-Hunyuan/Hunyuan3D-2.1
• ハギングフェイスモデルライブラリ：https://huggingface.co/tencent/Hunyuan3D-2.1

Hunyuan3D-2.1の応用シナリオ

• ゲーム開発Hunyuan3D-2.1は、高品質な3Dキャラクター、小道具、シーンを迅速に生成でき、ゲーム開発の効率を大幅に向上させます。
• 映画およびテレビ制作映画やテレビの特殊効果制作において、Hunyuan3D-2.1は複雑な3Dシーンやキャラクターを生成するために使用でき、特殊効果制作の効率と効果を向上させることができます。
• 工業デザインHunyuan3D-2.1は、製品のプロトタイプ作成プロセスを加速させ、複数の3Dフォーマットをサポートし、生成されたモデルを3Dプリントに直接使用できます。
• EコマースショーケースHunyuan3D-2.1は、製品の3D表示モデルを作成し、ユーザーエクスペリエンスを向上させます。生成されたモデルは複数のフォーマットに対応しており、ECプラットフォームでの製品表示に直接使用できます。
• メタバース構築Hunyuan3D-2.1は、仮想キャラクターや仮想シーンなど、大規模な仮想世界コンテンツを生成でき、メタバースの構築に適しています。