最近,清華系的生數科技推出了一項令人興奮的功能,任何人只需一張圖片,就能輕鬆生成各種背景的視頻,彷彿擁有了 “視頻魔法”。
這項功能就是 “主體參照”功能,它的最大亮點在於,可以讓視頻中的任何主體 —— 無論是人、動物,還是虛構角色,都能在不同場景中保持一致的形象。
主要特色如下:
支持單一角色的面容、半身、全身的一致可控
如需重點保持主體面容一致,需僅截取單一主體的清晰面容圖
如需重點保持主體半身一致(面容+上半身服飾),僅需截取單一主體的清晰半身圖
如需重點保持主體全身一致(全身特徵),僅需截取單一主體的清晰全身圖
生數科技的 CEO 唐家渝表示,傳統的視頻生成方式往往會因爲細節不夠穩定而讓內容崩壞,而這項新技術則爲創作者提供了更多的自由度和控制力。
比如AIbase想讓之前生成的一個小女孩的圖片,換一個場景,就可以點擊參考生視頻選項,上傳圖片並選擇主體,然後簡單描述一下場景:
例如:
小女孩戴着頭盔在天空遨遊
然後就生成了這樣的視頻:
如果你只想參考人物的長相,不想參考服裝等特徵,那麼,在選擇主體的時候,只需要框選頭部即可。
然後,AIbase通過簡單的描述,輕鬆地將小女孩放在了草地上。除了最後手舉起來有點崩了以外,整體的效果已經十分驚豔。
當然,這個功能用於真人、寵物圖像,更是不在話下。比如,拿一張美女的照片,你只需簡單描述背景,就可以生成下面這樣生動的視頻:
除了人物、動漫角色、寵物以外,Vidu的主體參照還支持商品。這裏AIbase拿之前生成的鑽石戒指的圖片測試一下:
整體運鏡還是挺連貫的,就是有點模糊了,如果加上一些專業的提示詞,效果應該會更好。
需要注意的是,這項功能目前僅支持單一主體的生成。如果你的圖片中有多個人物或物體,系統會要求你框選出一個主體進行處理。這樣,儘管不能同時處理多個對象,但可以確保每個主體在視頻中的表現都能保持一致。
感興趣的點此體驗:https://top.aibase.com/tool/vidu