アリババが発表した、画像から動画へのキャラクターアニメーション合成のためのフレームワーク「Animate Anyone」。

アリババ知能コンピューティング研究所が開発したAnimate Anyoneは、静止画像内の人物やフィギュアをアニメーション化するオープンソースフレームワークです。GitHubで13,000近いスターを獲得し、国内外で活発な議論を巻き起こしています。拡散モデルを基盤とするこのフレームワークは、ReferenceNet、Pose Guider、タイミング生成モジュールなどの技術を組み込むことで、写真のアニメーション化における一貫性、制御性、安定性を維持し、高品質な動的ビデオを出力します。アリババのAIチャットアシスタント「通義千文」の「通義ダンスキング」機能は、この技術をベースにしており、写真内の人物やフィギュアが、運転テスト、肩を振るダンス、幽霊ダンスなど、さまざまなダンスを披露することができます。

Animate Anyoneのアプリケーションシナリオ

• キャラクターに命を吹き込む：実在の人物、アニメキャラクター、漫画キャラクター、人型オブジェクトなど、どんなものでもAnimate Anyoneを使えば命を吹き込むことができ、あらゆる種類のクリエイティブプロジェクトに楽しさを加えることができます。
• ファッションビデオ合成：ファッション業界では、Animate Anyoneを使用することで、静止したモデルを動的なディスプレイに変換し、さまざまな角度からのダイナミックなプレゼンテーションや、衣服の多様な効果を実現することで、衣服のディスプレイに新たな視覚体験を提供できます。
• 人間ダンス生成：Animate Anyoneは、参照画像とポーズスケルタルアニメーションを組み合わせることで、誰でもリアルなダンスビデオを生成でき、ごく普通のキャラクターでも踊らせることができます。

Animate Anyone の使い方

Animate Anyoneのプロジェクトホームページはhttps://humanaigc.github.io/animate-anyone/GitHubリポジトリのアドレスはhttps://github.com/HumanAIGC/AnimateAnyoneTongyi QianwenアプリまたはHugging Faceを通じて、オンラインで手軽に体験できます。

1. ハグフェイスコミュニティデモ：訪問https://huggingface.co/spaces/xunsong/Moore-AnimateAnyone画像をアップロードするかドラッグ＆ドロップし、動的なポーズグラフを追加し、パラメーターを調整してから、「アニメーション」をクリックすると、画像内のキャラクターがアニメーションします。
2. 同義千問：スマートフォンに同義千問アプリをインストールし、コマンドセンターで「写真で踊る」を選択するか、「同義ダンスキング」と直接入力します。興味のあるダンステンプレートを選択し、静止画をアップロードすると、動的なビデオが生成されます。