2025年2月14日,崑崙萬維集團正式推出Matrix-Zero世界模型,標誌着中國在空間智能領域邁出了重要一步。Matrix-Zero包含兩款子模型:3D場景生成大模型和可交互視頻生成大模型,旨在通過AI技術重塑數字內容創作模式,推動影視製作、遊戲開發、具身智能等行業的創新發展。
Matrix-Zero的3D場景生成大模型能夠將用戶輸入的圖片轉化爲可自由探索的真實3D場景,支持不同風格的圖片輸入和風格遷移,並具備動態場景生成能力。該模型通過場景佈局生成模塊和紋理生成模塊,結合可微渲染和擴散模型技術,確保生成的3D場景全局一致、動態合理,爲3D遊戲建模和具身智能模擬場景搭建提供了高效解決方案。例如,輸入一張“城堡的花園一角”圖片,模型可生成360度環視後場景保持不變的3D場景,並支持用戶進行長距離、大範圍的自由探索。
與此同時,Matrix-Zero的可交互視頻生成大模型以用戶輸入爲核心驅動,結合先進的生成式視頻模型和自主研發的用戶交互模塊,實現了視頻內容中視角移動的精確控制。用戶可以通過鍵盤或鼠標輸入,控制視頻中的視角和運動軌跡,實現前後左右移動以及視角變換等操作。該模型包含離散運動控制模塊、連續視角控制模塊、3D場景位置追蹤模塊和滑動窗口機制,確保交互體驗的流暢性和連貫性。
崑崙萬維作爲中國AI領域的領軍企業,始終致力於實現通用人工智能,並通過自主研發不斷推出創新的AI產品。Matrix-Zero的推出不僅是公司在空間智能領域的重大突破,也是其AI業務矩陣的重要補充。過去三年,崑崙萬維在視覺多模態、深度學習等關鍵技術方向取得了顯著成果,並構建了包括天工AI搜索、Mureka音樂創作平臺、SkyReels短劇平臺等在內的完整AI矩陣。
Matrix-Zero預計將於4月份正式上線,屆時將爲崑崙萬維的AI遊戲生產、AI短劇製作等業務帶來新的賦能,爲用戶和開發者提供全新的平臺和工具。