在這個圖像越來越重要的時代,有一個能夠生成超高分辨率圖像的模型,簡直就是設計師和創作者的福音。UltraPixel,正是這樣一個黑科技。
首先,它支持直接生成1K到6K分辨率的圖片。想象一下,隨便一張圖,都能精細到毛孔,清晰到纖毫。演示圖片更是離譜,細節補充得毫無違和感,看得人瞠目結舌。
UltraPixel的祕密在於它基於Stable cascade進行的訓練和微調,並且即將開源,大家都能親自體驗一下這份科技的魅力。
這個模型在去噪的後期階段,通過低分辨率圖像中的豐富語義信息,來指導高分辨率圖像的生成。換句話說,就是把複雜的事情變簡單了,大大降低了生成高分辨率圖像的複雜性。
此外,它提出了隱式神經表示,用於連續上採樣,並引入了適應不同分辨率的尺度感知歸一化層。這些技術手段的運用,使得圖像在低分辨率到高分辨率的處理過程中,保持了高度的細節和真實感。
更令人驚歎的是,無論是低分辨率還是高分辨率的處理,都是在最小空間內進行的。兩個過程共享大部分參數,高分辨率輸出所需的額外參數不到3%。這意味着,UltraPixel不僅能生成超高分辨率的圖片,還極大地提高了訓練和推理的效率。