project
Voost - 革新的な双方向バーチャル試着・試着AIモデル
Voostは、NXN Labsが開発した革新的なバーチャル試着・試着モデルで、統一性と拡張性に優れたDiffusion Transformer(DiT)フレームワークに基づいて構築されています。バーチャル試着とバーチャル試着の両方のタスクを同時に処理できます。
Voostとは何ですか?
Voostは、NXN Labsが開発した革新的な仮想試着・試着オフモデルで、統一性と拡張性に優れたDiffusion Transformer(DiT)フレームワークに基づいて構築されています。仮想試着と試着オフのタスクを同時に処理し、高品質な画像結果を生成します。Voostは、これら2つのタスクを共同で学習することで双方向監視メカニズムを利用し、衣服と人物の各データペアが双方向の生成のための監視信号を提供できるようにしています。これにより、タスク固有のネットワーク、補助的な損失、または追加のラベルに頼ることなく、衣服と身体の関係を推論する能力が大幅に向上します。
Voostの主な機能
-
双方向のバーチャル試着と試着Voostは、仮想試着と仮想脱衣を同時に処理でき、ユーザーが対象の衣服を着用したり脱いだりした際の効果を確認できる高品質な画像結果を生成します。
-
統一フレームワーク単一の拡散変換器(DiT)を通して仮想的な試着と試着解除のタスクを共同で学習することで、タスク固有のネットワーク、補助的な損失、または追加のラベルに頼ることなく、モデル構造が簡素化され、効率が向上します。
-
関係推論能力の向上双方向監視メカニズムを利用することで、衣服と人物の各データペアは、双方向の生成に対して監視信号を提供することができ、それによって衣服と身体の関係に関する推論能力が向上する。
-
堅牢性の向上解像度やマスクの変化に対するモデルの堅牢性を高めるために、アテンション温度スケーリング技術が導入されています。また、自己修正サンプリング戦略が採用され、双方向の一貫性検証が使用されて、生成された結果の安定性と精度が向上しています。
-
高品質な生成複数のベンチマークテストにおいて、Voostは衣服の位置合わせ精度と視覚的忠実度において最高のパフォーマンスを達成し、優れた汎化能力を発揮して、リアルな試着・試着画像を生成しました。
-
柔軟な条件付き入力柔軟な条件付き入力をサポートしており、生成方向や衣服のカテゴリに基づいて条件付けを行うことで、モデルの柔軟性と適応性を高め、さまざまな衣服のカテゴリや人間のポーズに対応できるようにしています。
ヴォーストの技術原則
-
統一拡散変換フレームワークVoostは、単一の拡散変換器(DiT)を用いて、仮想試着と仮想試着解除のタスクを共同で学習します。双方向監視メカニズムにより、衣服と人物の各データペアは、双方向の生成のための監視信号を提供することができ、衣服と身体の関係性に関する推論能力を高めます。
-
双方向監視メカニズムVoostは、仮想的な試着と試着解除のタスクを共同でモデル化することにより、双方向の監視信号を利用して、追加のラベルやタスク固有のネットワークを必要とせずに、衣服と身体の対応関係に対するモデルの理解を向上させます。
-
注意温度スケーリング注意温度スケーリング技術は、注意重みを調整し、解像度やマスクの変化に対するモデルの堅牢性を高め、さまざまな入力条件下での安定性と一貫性を確保するために導入されます。
-
自己修正型サンプリング戦略双方向生成結果を用いて相互整合性検証を行います。生成結果の安定性と精度を向上させ、生成画像の視覚的な一貫性とリアリティを確保するために、自己修正サンプリング戦略を採用しています。
Voostのプロジェクトアドレス
- プロジェクト公式サイト:https://nxnai.github.io/Voost/
- GitHubリポジトリ:https://github.com/nxnai/Voost
- arXiv技術論文:https://arxiv.org/pdf/2508.04825
Voostのアプリケーションシナリオ
-
eコマースプラットフォームユーザーが服を着たときの見た目をより直感的に確認できるよう、仮想試着機能を提供することで、ショッピング体験を向上させ、サイズやスタイルが合わないことによる返品率を減らし、プラットフォームのコンバージョン率を高める。
-
ファッションデザインデザイナーはVoostを利用することで、服のデザインがさまざまなマネキンにどのように見えるかを素早くプレビューしたり、デザインの実現可能性を事前に評価したり、デザインプロセスを最適化したり、デザインコストを削減したりすることができます。
-
パーソナライズされたカスタマイズ消費者にパーソナライズされたバーチャル試着体験を提供し、ニーズに応じてさまざまな服のスタイル、色、組み合わせを選択できるようにすることで、カスタマイズされたサービスを実現し、個々の要望に応える。
-
服飾ショーブランドや販売業者はVoostを利用して、オンラインで衣料品を紹介したり、バーチャル試着機能を通じてより多くのユーザーを引き付けたり、ブランドの影響力や製品の露出度を高めたりすることができます。
-
バーチャル試着室当社は、実店舗の衣料品店向けにバーチャル試着ソリューションを提供し、顧客の待ち時間を短縮し、試着効率を向上させ、より充実した試着体験を顧客に提供します。