是否還在感嘆視頻製作門檻高,後期編輯太燒腦?別擔心,阿里通義Wan團隊再次出手,推出了他們最新的重量級模型All-in-One視頻生成和編輯模型——VACE

VACE最引人注目的能力之一,便是其強大的按條件生成視頻功能。這意味着,你只需要用文字描繪出心中的場景,VACE就能迅速將你的想象變爲現實。這如同擁有了一支聽你指揮的夢幻攝製組,效率之高令人驚歎!

VACE支持多種靈活高效的編輯方式,包括:

QQ_1741833014094.png

  • 物體運動軌跡任你掌控。藉助 Move-Anything 功能,你可以精確控制視頻中任何物體的運動軌跡。無論是想讓飛鳥劃出優美的弧線,還是讓汽車按照指定的路線行駛,VACE都能輕鬆實現。
  • 視頻主體一鍵替換Swap-Anything 功能讓你能夠隨心所欲地替換視頻中的主體。想讓紀錄片裏的獵豹變成一隻憨態可掬的熊貓?想讓廣告片的主角瞬間改頭換面?VACE都能幫你實現“乾坤大挪移”。
  • 參考主體風格遷移。通過 Reference-Anything 功能,VACE可以學習並應用你提供的參考對象的風格到視頻主體上。無論是想讓實拍視頻擁有動漫的質感,還是讓普通人秒變藝術畫作主角,都不在話下。
  • 視頻畫面智能擴展Expand-Anything 功能可以智能地擴展視頻的畫面內容。再也不用擔心拍攝角度受限,VACE能幫你把“窄”變“寬”,讓視野更開闊。
  • 靜態畫面賦予動態生命Animate-Anything 功能能夠讓靜態的圖像動起來。無論是老照片還是藝術畫作,都能在VACE的魔法下煥發新的生機。

老片新生,VACE的視頻修復術也有一手

值得一提的是,VACE在視頻重渲染方面也展現了不俗的實力。它支持內容保留結構保留主體保留姿態保留運動保留等多種模式。這意味着,即使是畫面模糊、細節丟失的老舊視頻,也能在VACE的修復下重現光彩,彷彿時光倒流一般。

阿里通義Wan團隊的VACE模型,憑藉其在視頻生成和編輯方面的強大功能,無疑將極大地提升視頻創作的效率和趣味性。它就像一位無所不能的視頻魔術師,能夠滿足用戶各種天馬行空的創意。 

雖然目前模型還未正式上線,但將會開源,VACE的到來將爲視頻內容創作領域帶來一場深刻的變革。

論文鏈接:https://arxiv.org/pdf/2503.07598

開源代碼:https://ali-vilab.github.io/VACE-Page/