Boow-VTON - アリババの AI 仮想試着技術 - AiBoss

Boow-VTONとは何ですか？

Boow-VTONは、アリババが開発した高度な仮想試着技術です。精密なマスキングや復元作業に頼ることなく、屋外シーンで高品質な仮想試着効果を実現します。大規模な非ペアリング学習データに基づいた効果的なデータ拡張手法により、モデルの試着性能を大幅に向上させています。Boow-VTONは、入力として生地画像、元のポーズ画像、元の人物画像のみを必要とするため、試着プロセスが簡素化され、より使いやすくなっています。Boow-VTONは、試着位置特定損失を導入することで、モデルが試着エリアを正確に識別できるようにしています。人物の特徴と背景コンテンツを保持しながら、Boow-VTONは複雑な前景やポーズを処理し、リアルな試着効果を提供するとともに、追加の学習なしで複数の衣服の試着をサポートします。Boow-VTONは、オンラインショッピングをはじめとする様々な分野で幅広い応用可能性を秘めています。

Boow-VTONの主な機能

衣服を覆わずに試着するユーザーは、正確なマスク設定を行わなくても、仮想的に服を試着できる。
データ拡張データ拡張技術を用いることで、モデルは現場のシナリオから得られたペアになっていないデータで訓練され、複雑な環境における適応性を向上させる。
フィッティング位置ずれモデルが適合領域をより正確に識別できるように、特別な損失関数が導入されています。
複数の服を試着してみましょうこれにより、ユーザーは複数の異なる衣服を同時に試着することができ、衣服ごとに個別のモデルをトレーニングする必要がなくなります。
使いやすい試着プロセスを簡素化します。試着を試みる人物、衣服、ポーズの画像を提供するだけで済みます。

Boow-VTONの技術原理

画像生成モデル拡散モデルなどの強力な画像生成モデルに基づいて、リアルな試着画像を合成します。
データ拡張手法より多様な背景と前景を合成することで、モデルの現場環境への適応性が向上する。
試着して位置を調整設計された損失関数を用いることで、モデルは画像内で衣服を試着すべき正しい領域を特定することを学習する。
注意機構注意機構を利用して衣服の特徴を人間の姿勢に合わせ、試着時に衣服が自然に体にフィットするようにする。
トレーニングパラダイム本論文では、擬似トレーニングペア（人物のソース画像、衣服の画像、適合結果の画像など）を構築することによってモデルをトレーニングする新しいトレーニングパラダイムを提案する。

Boow-VTONプロジェクトの住所

GitHubリポジトリ：https://github.com/little-misfit/BooW-VTON（近日中にオープンソース化予定）
arXiv技術論文：https://arxiv.org/pdf/2408.06047

Boow-VTONの応用シナリオ

オンラインショッピング消費者はオンラインで服を購入する際、Boow-VTONの技術を使って、モデルに着せたり、自分の写真に着せたりすることで、服の見た目やフィット感をよりよく理解することができます。
ファッション小売小売店は店舗内にバーチャル試着室を設置し、顧客が実際に服を着ることなく、さまざまな服のスタイルや組み合わせを試着できるようにしている。
パーソナライズされたおすすめ情報Boow-VTONは、ユーザーの体型、好み、過去の購入データを組み合わせることで、パーソナライズされた服のおすすめ情報を提供します。
ソーシャルメディアユーザーはBoow-VTONテクノロジーを使用して、仮想試着効果をソーシャルメディアで共有することができ、インタラクティブ性とエンターテイメント性が向上します。
ファッションデザインファッションデザイナーは、デザインスケッチの着用感を事前に確認することで、実物のサンプルを作成する前に修正や最適化を行うことができる。
広告とマーケティングブランド各社はBoow-VTONの技術を利用して、モデルや有名人が自社ブランドの服を着ている様子を魅力的に見せる広告を作成し、それによってブランドの魅力を高めている。