網購時，你是不是也被買家秀和賣家秀的巨大差異傷到過?明明是同一件衣服，穿在模特身上時尚感爆棚，怎麼到自己身上就變得“慘不忍睹”?別擔心!德國比勒費爾德大學的機器學習團隊開發了一項名爲 TryOffDiff 的 AI 黑科技，可以將照片中的人物“去掉”，只留下衣服本身，生成一張標準的商品展示圖!

image.png

這項技術利用了強大的“擴散模型”人工智能技術，能夠從一張照片中識別出衣服的形狀、顏色、紋理等信息，並將這些信息“還原”成一張高清的商品展示圖。 生成的圖片不僅細節清晰逼真，還能自動去除背景，就像專業攝影師的作品一樣!

TryOffDiff 的工作原理是什麼呢?簡單來說，它就像一個技藝精湛的“裁縫”。首先，它會使用一種名爲 SigLIP 的圖像編碼器，從照片中提取出衣服的特徵信息，包括顏色、紋理、圖案等等，就像裁縫仔細觀察布料一樣。 然後，它會將這些信息“喂”給Stable Diffusion 圖像生成模型。Stable Diffusion 就像一臺神奇的“縫紉機”，能夠根據輸入的信息生成各種各樣的圖像。 最後，Stable Diffusion 會根據提取到的衣服特徵信息，生成一張標準的商品展示圖，並將衣服“穿”在一個虛擬模特身上，就像裁縫製作出一件完美的成衣一樣。

爲了測試 TryOffDiff 的效果，研究人員使用了一個名爲 VITON-HD 的數據集進行訓練和測試。 實驗結果表明，TryOffDiff 的效果非常出色，它生成的服裝圖片不僅細節清晰，而且非常逼真，甚至可以媲美專業攝影師的作品! 與現有的虛擬試衣技術相比，TryOffDiff 在保留服裝細節方面表現更加出色，尤其是在圖案和logo等方面。

這項技術的應用前景非常廣闊，它不僅可以幫助消費者更好地瞭解商品信息，還可以幫助電商平臺提升商品展示效果，降低退貨率。 未來，你網購衣服時，可能只需要上傳一張自己的照片，就能看到自己穿上不同衣服的效果，再也不用擔心買家秀和賣家秀的“貨不對板”了!

在線體驗：https://huggingface.co/spaces/rizavelioglu/tryoffdiff

項目地址：https://rizavelioglu.github.io/tryoffdiff/