AI生成3D新框架TexGen：輸入文本指令引導超逼真3D紋理生成

在3D 建模領域，如何生成逼真的紋理一直是個難題。最近，阿爾伯塔大學、多倫多大學以及華爲諾亞方舟實驗室的研究人員聯合推出了一種新方法 ——TexGen。這項技術能夠根據用戶的文本描述，生成與之相對應的3D 紋理，且其效果顯著優於現有的同類技術。

產品入口：https://top.aibase.com/tool/texgen

TexGen 的核心是一個多視角採樣與重採樣的框架，藉助一個預訓練的文本到圖像的擴散模型來進行操作。傳統的方法在生成紋理時，常常會出現明顯的接縫或過度平滑的問題。

TexGen 通過維護一個以 RGB 空間爲參數的紋理圖，並在每次擴散模型的採樣步驟後更新它，從而有效降低了視角間的差異。這種視角一致的採樣方式，讓每個視角之間的紋理更加連貫自然。

TexGen 中還引入了一種注意力引導的多視角採樣策略，通過這種策略，紋理的外觀信息能夠在不同的視角之間進行廣播，從而確保生成的紋理在各個視角下都具備一致性。

此外，爲了保護紋理細節，研究團隊還開發了一種噪聲重採樣技術，這能夠幫助估算噪聲，併爲後續的去噪步驟生成合適的輸入。這樣，TexGen 不僅在紋理生成上實現了突破，甚至在紋理編輯上也表現出色，能夠在保留原有身份的同時進行調整。

經過大量的定性和定量評估，研究團隊發現 TexGen 在生成多樣化3D 對象的紋理質量、視角一致性和豐富的外觀細節上，均表現得相當出色，超越了當前最先進的方法。

下面是TexGen與 TEXTure、Text2Tex、Fantasia3D 和 ProlificDreamer 的比較

下面是一些效果展示:

劃重點:

🌟 TexGen 能夠根據文本描述生成高質量的3D 紋理，解決傳統方法中的接縫和過度平滑問題。  

👀 採用多視角採樣和重採樣框架，確保各視角間的紋理一致性。  

🖌️ 新的噪聲重採樣技術使得 TexGen 在紋理編輯中同樣表現出色，能夠保留原有風格。