Stability AI發佈了一款名爲 Stable Zero123的全新 AI 模型,該模型能夠根據單張圖片生成高質量的3D 物體視圖。Stable Zero123在生成的效果上顯著超越了其前身 Zero123-XL,主要得益於三個關鍵創新。

Stable Zero123採用了一種經過嚴格篩選的訓練數據集,這些數據集來自 Objaverse,專門保留了高質量的3D 物體。這一改進確保了生成的3D 物體更加逼真。

在模型的訓練和推理過程中,Stable Zero123使用了估計的相機角度進行 “升高條件”(elevation conditioning),這一技術使模型能夠進行更準確的預測,顯著提升了生成圖像的質量。Stable Zero123還引入了一種預計算數據集和改進的數據加載器,使得訓練效率提高了40倍。
Stable Zero123目前已在 Hugging Face 上發佈,供研究人員和非商業用戶下載與實驗。需要注意的是,該模型的使用受到一定的授權限制,分爲兩種版本:Stable Zero123和 Stable Zero123C。前者包含了一些 CC-BY-NC 授權的3D 物體,僅可用於研究用途;後者則僅使用了 CC-BY 和 CC0授權的物體,允許擁有Stability AI 會員的用戶進行商業使用。
此外,Stable Zero123還與開源代碼 threestudio 相結合,支持3D 物體生成的開源研究。當前,相關的簡化版 Stable3D 流程正處於私密預覽階段。通過這種方法,用戶可以利用 Score Distillation Sampling(SDS)優化神經輻射場(NeRF),從 Stable Zero123模型生成的圖像中構建出紋理豐富的3D 模型。
Stable Zero123的發佈不僅爲3D 物體生成領域帶來了顯著的技術進步,還爲研究和商業應用提供了新的可能性。
官方博客:https://stability.ai/news/stable-zero123-3d-generation
劃重點:
🌟 Stable Zero123能夠根據單張圖片生成高質量3D 物體視圖,顯著提升生成效果。
📈 該模型通過改進的數據集和升高條件技術,實現了更準確的圖像生成。
🆕 Stable Zero123分爲研究版和商業版,後者需持有Stability AI 會員資格。
