ネットで服を買う時、気に入った服に迷って、家に買って帰っても合わないのではないかと心配になったことはありませんか？もう心配はいりません！画期的な技術が登場しました！Google Researchチームが最新開発したFashion-VDM技術を使えば、自宅にいながら様々な素敵な服を試着できるようになります！

Fashion-VDMとは一体どんな魔法のような技術なのでしょうか？簡単に言うと、ビデオ拡散モデルです。服の写真と自分の動画を提供するだけで、その服を着ている自分の動画を生成できます。しかも、驚くほどリアルです！

「市販のバーチャル試着ソフトは既に存在するのでは？」と思われるかもしれません。しかし、それらの多くは画像ベースのもので、静止画しか生成できず、効果も悲惨なことが多いです。服を着ている姿はまるでステッカーを貼ったようで、リアル感が全くありません。Fashion-VDMは全く違います。生成されるのは動的なビデオであり、様々な角度からの着用効果を示せるだけでなく、シワや揺れなどの衣服の動きの変化もシミュレートでき、まるで実際に試着しているかのように見えます！

Fashion-VDMの秘密は、分離型無分類器誘導技術（split-CFG）を採用している点にあります。この技術により、人物と衣服の情報をより正確に制御し、生成されたビデオが自分の特徴を維持しつつ、衣服の細部も完璧に表現できるようになります。

QQ20241113-101859.jpg

動画をよりスムーズで自然なものにするために、Fashion-VDMは段階的な時間トレーニング戦略を採用しています。まず大量の画像データでモデルをトレーニングし、その後、ビデオデータのトレーニング時間を段階的に増やすことで、最終的に64フレームもの超長尺ビデオを生成し、画面の途切れやちらつきを完全に解消します！

さらにすごいのは、Fashion-VDMが画像とビデオデータを組み合わせてトレーニングしていることです。つまり、画像から衣服の細部を学習するだけでなく、ビデオから人物の動きや衣服の動きの変化を学習し、よりリアルで説得力のある試着ビデオを生成します。

Fashion-VDMの効果をテストするために、研究者たちはそれを市販の他のバーチャル試着技術やアニメーション技術と比較しました。その結果、Fashion-VDMは画像品質、動画の滑らかさ、衣服の再現性において圧倒的な勝利を収めました！

もちろん、Fashion-VDMはまだいくつかの限界があります。例えば、衣服が隠れている部分を処理する場合、細部が不正確になる可能性があり、体型がわずかに変形する可能性もあります。しかし、技術の進歩に伴い、Fashion-VDMはますます完璧になり、最終的には私たちのオンラインショッピング体験を完全に変えるでしょう！

もうオンラインショッピングで服を間違って買う心配はありません。Fashion-VDMがあれば、試着室なんて時代遅れです！

プロジェクトアドレス：https://johannakarras.github.io/Fashion-VDM/