2025年5月19日,嗶哩嗶哩(B站)宣佈開源其最新的動畫視頻生成模型——Index-AniSora,這一創新技術爲二次元風格視頻的生成帶來了革命性的突破。Index-AniSora支持多種二次元風格視頻鏡頭的一鍵生成,包括番劇、國創、漫改動畫、VTuber、動畫PV和鬼畜動畫等,極大地提升了動畫內容的生產效率與質量。

Index-AniSora的技術原理基於B站提出的AniSora模型,該模型已經在國際人工智能會議IJCAI2025上被接收。在此基礎上,B站進一步提出了首個專爲二次元視頻生成打造的強化學習技術框架,通過人類反饋對動畫視頻生成進行對齊優化,從而全面提升生成內容的質量。

微信截圖_20250520075744.png

在技術實現方面,B站的研究團隊構建了首個面向動漫領域的高質量獎勵數據集,包含30,000條人工標註的動漫視頻樣本。該數據集從視覺外觀和視覺一致性兩個方面對視頻質量進行評估,涵蓋了視覺平滑度、視覺運動、視覺吸引力、文本與視頻一致性、圖像與視頻一致性以及角色一致性等多個維度。基於這些維度,研究團隊提出了AnimeReward,一個專爲動漫視頻生成對齊設計的多維度高可信獎勵系統。

爲了進一步提升模型的對齊性能,研究團隊提出了差距感知偏好優化(GAPO),將正負樣本對之間的偏好差距融入損失函數,從而提升對齊訓練的效率和最終性能。實驗結果表明,通過AnimeReward和GAPO優化後的模型在多個評價維度上均顯著優於基線模型和監督微調(SFT)模型,生成的動畫視頻更貼近人類偏好。

B站的這一開源項目不僅爲動畫視頻生成領域帶來了新的技術突破,也爲廣大開發者和愛好者提供了寶貴的資源和工具。通過Index-AniSora,用戶可以輕鬆將喜歡的漫畫轉化爲生動的動畫效果,支持多種小衆畫風,效果更加豐富,徹底告別“PPT動畫”時代。這一技術的開源,無疑將推動二次元內容創作的進一步發展,爲動漫愛好者和創作者帶來更多的可能性。

地址:

https://github.com/bilibili/Index-anisora/tree/main

模型鏈接:

https://modelscope.cn/models/bilibili-index/Index-anisora

體驗鏈接:

https://modelscope.cn/studios/bilibili-index/Anisora