人工智能在數字人領域的應用持續升溫，阿里巴巴聯合北京郵電大學近日推出了一項令人矚目的新項目——FantasyPortrait。這一項目通過創新的表情增強擴散變換器（DiT），實現了單人及多人場景下的複雜情感表達與跨身份表情遷移，爲數字人動畫技術帶來了全新突破。

 FantasyPortrait:數字人動畫的革命性突破

FantasyPortrait項目基於表情增強擴散變換器（Expression-augmented DiT）技術，專注於數字人動畫的生成與控制。AIbase從社交媒體獲悉，該項目能夠高效處理單人及多人場景，支持跨身份的表情遷移，並實現複雜情感的精準表達。無論是細膩的微笑還是激烈的憤怒，FantasyPortrait都能以高保真度還原，極大提升了數字人動畫的真實感和表現力。

image.png

更令人印象深刻的是，FantasyPortrait在多人場景中能夠實現多角色獨立表情控制，避免了傳統技術中常見的表情串擾問題。這意味着多個數字人可以在同一場景中展現截然不同的表情，而不會相互干擾，爲影視製作、虛擬現實和遊戲開發等場景提供了強大的技術支持。

 支持多模態驅動，覆蓋人物與動物

FantasyPortrait的靈活性是其核心亮點之一。該技術不僅支持人類角色的動畫生成，還能處理動物形象，爲創意內容創作者提供了更多可能性。此外，項目支持音頻驅動功能，用戶可以通過音頻輸入驅動數字人的表情和動作，生成與音頻節奏高度同步的動畫效果。

AIbase編輯團隊認爲，這一多模態驅動能力使得FantasyPortrait在虛擬主播、短視頻內容創作和互動娛樂領域具有廣泛的應用前景。無論是打造虛擬偶像還是生成個性化動畫，FantasyPortrait都能提供高效且高質量的解決方案。

 開源承諾，賦能開發者社區

據社交媒體信息，FantasyPortrait的代碼和模型預計將在未來開源。這一舉措將進一步降低開發者獲取尖端數字人技術的門檻，助力全球開發者社區探索和應用這一技術。AIbase注意到，阿里近年來在AI開源領域的持續投入已收穫廣泛好評，FantasyPortrait的開源計劃無疑將進一步鞏固其在數字人技術領域的領先地位。

此外，阿里與北京郵電大學的合作也體現了產學研結合的典範。北京郵電大學在通信與AI領域的深厚學術積澱，結合阿里的工程化能力，爲FantasyPortrait的研發提供了堅實支撐。

 多場景應用，開啓數字人新篇章

FantasyPortrait的推出標誌着數字人技術在情感表達和多角色交互上的重大進步。其在影視製作、虛擬現實、遊戲開發等領域的潛在應用令人期待。例如，影視製作團隊可以利用FantasyPortrait快速生成多角色動畫場景，降低製作成本;遊戲開發者則可以通過其音頻驅動功能打造更具沉浸感的角色互動體驗。

AIbase編輯團隊認爲，FantasyPortrait的創新不僅提升了數字人動畫的質量，也爲內容創作者提供了更靈活的工具。隨着技術的進一步成熟，FantasyPortrait有望成爲數字人領域的標杆技術，推動行業邁向新的高度。

結語  

阿里與北京郵電大學聯合推出的FantasyPortrait項目，以其在表情遷移、多角色控制和多模態驅動上的突破，爲數字人技術開闢了新的可能性。AIbase將持續關注該項目的最新進展和開源動態，爲讀者帶來更多前沿資訊。如果你對數字人動畫感興趣，不妨期待FantasyPortrait的代碼發佈，親自體驗這一技術的魅力!

項目地址：https://github.com/Fantasy-AMAP/fantasy-portrait