由研究團隊 tau-yihouxiang 開發的 EX-4D（Extreme Viewpoint4D Video Generation）技術，一項顛覆傳統的視頻生成創新，正在全球範圍內引發廣泛關注。這項技術旨在將單目視頻轉化爲可控的4D 體驗，尤其在極端攝像機角度下展現出卓越的性能。

EX-4D 技術的核心在於其獨特的“深度水密網格”構建方法。這種新穎的幾何表示方式，能夠有效建模可見和被遮擋區域，並在 -90° 至90° 的廣泛角度範圍內生成高質量視頻。這一突破爲遊戲、電影製作、虛擬現實（VR）和增強現實(AR)等多個領域的應用奠定了基礎。

與傳統視頻生成方法不同，EX-4D 不需要昂貴的多視圖數據集，它採用創新的屏蔽策略，顯著降低了數據獲取成本。此外，該技術使用的輕量級架構使其訓練參數僅爲14B 視頻擴散主幹的1%，顯著提升了模型的訓練效率。

在用戶研究中，70.7% 的參與者更喜歡 EX-4D 生成的視頻效果，其在物理一致性和極端視角質量上的表現明顯優於現有基線方法。這充分展示了 EX-4D 在處理極端攝像機角度時的顯著優勢，預示着視頻內容創作的未來將更加生動和富有表現力。

QQ20250703-100417.png

EX-4D 的應用前景廣闊，它不僅能用於創造沉浸式遊戲視頻、生成電影后期製作的全新鏡頭角度，還能爲社交媒體內容創作提供動態的攝像機運動。這項技術的推出標誌着視頻生成領域的又一次重大飛躍。

然而，EX-4D 也面臨一些挑戰，包括對單目深度估計質量的依賴、計算成本以及對反射和透明材料的處理等問題。研究團隊表示，未來將致力於優化實時推斷，並支持更高分辨率的視頻生成，以進一步推動該技術的發展。

EX-4D 的實現不僅爲視頻生成技術的進步注入了新動力，也爲相關行業的應用開闢了廣闊前景。隨着該技術的不斷完善，未來的數字內容創作將更加多樣化和創新化。

地址：https://github.com/tau-yihouxiang/EX-4D