通義App最新推出了一項創新的角色扮演功能,用戶可以輕鬆實現一鍵替換視頻中的人物。這一功能得益於阿里通義實驗室今年年初推出的Motionshop模型,該模型自發布以來,已經吸引了全球創作者的高度關注。

目前,Motionshop已經完成產品化並集成到通義App中,向所有用戶免費開放,使得視頻創作和動畫製作領域得到了更多創新的可能性。爲了進一步豐富用戶的創作體驗,通義App計劃在9月份推出自定義角色功能。

微信截圖_20240806152420.png

Motionshop是通義實驗室研發的AI模型,屬於當前流行的AIGC(AI生成內容)領域。該模型融合了視頻處理、角色跟蹤/分割、姿態估計、路徑追蹤渲染等多種先進技術,允許用戶在動態視頻中輕鬆實現現實與虛擬的轉換。

在Motionshop出現之前,傳統的人物替換特效主要依賴路徑追蹤渲染技術,雖然效果逼真,但效率較低。而如果採用犧牲渲染質量的傳統實時光柵化方案,雖然性能得到提升,但渲染質量會大打折扣。