近日,Midjourney 宣佈正在開發一款視頻升頻器以及專爲動漫風格設計的Niji 視頻模型,引發了全球創作者和AI技術愛好者的熱烈討論。AIbase編輯部整理了最新動態,爲您深入解析這兩項前沿技術的潛力與未來影響。

Midjourney視頻升頻器:提升畫質,放大創意

Midjourney 的視頻升頻器旨在通過先進的AI算法,將低分辨率視頻提升至更高的清晰度,同時保留畫面細節並增強視覺效果。類似其圖像升頻工具(如 Upscale2x 和4x),該視頻升頻器預計將支持從標清到高清甚至4K的畫質提升,爲創作者提供更高質量的輸出選擇。  

元宇宙 科幻 賽博朋克 大模型 (2)繪畫

據公開信息,Midjourney 的圖像升頻技術已能將1024x1024像素的圖像提升至2048x2048或4096x4096像素,並通過“Subtle”和“Creative”模式平衡細節保留與新細節生成。 視頻升頻器有望沿襲這一技術優勢,解決視頻內容在放大後出現的像素化或模糊問題,特別適合短視頻、廣告素材和影視後期處理等場景。

Niji 視頻模型:動漫風格的動態新篇章

與此同時,Midjourney 正在開發的 Niji 視頻模型將專注於生成動漫風格的動態內容。Niji 模型自推出以來,以其在動漫、插畫和卡通風格圖像生成中的卓越表現受到廣泛好評。2023年4月發佈的 Niji5模型支持“cute”“expressive”“scenic”等風格參數,爲用戶提供了多樣化的創作選擇。  

Niji 視頻模型的開發標誌着 Midjourney 將其動漫生成能力從靜態圖像擴展到動態視頻。結合 Midjourney 現有的 V1視頻模型(支持圖像到視頻生成,每次生成5至20秒的視頻片段),Niji 視頻模型預計將繼承高品質的藝術風格,特別適合製作動漫短片、角色動畫或遊戲宣傳視頻。社區反饋顯示,當前的 V1視頻模型已能生成24fps、480p的視頻,並支持“高動態”和“低動態”模式以適配不同節奏的場景。 Niji 視頻模型有望進一步提升分辨率和風格一致性。

技術內核與生態整合

Midjourney 的視頻升頻器和 Niji 視頻模型均依託其強大的AI架構和GPU加速技術。視頻升頻器可能採用類似 Gigapixel AI 的超分辨率算法,通過深度學習生成更真實的細節,優化紋理、毛髮和背景等元素。 而 Niji 視頻模型則可能基於 Midjourney 的 V6架構,結合自然語言處理(NLP)技術,支持更精準的提示詞驅動創作。  

值得注意的是,Midjourney 的生態系統已實現從文本到圖像再到視頻的完整鏈路。用戶可以先通過文本生成圖像,再將圖像轉化爲視頻,並利用即將推出的升頻器優化輸出質量。這種無縫整合爲創作者提供了從創意到成品的一站式解決方案。

行業影響:重塑視頻內容創作

Midjourney 的這兩項開發將對多個行業產生深遠影響:  

短視頻與社交媒體:視頻升頻器可提升用戶生成內容(UGC)的畫質,增強平臺視覺體驗;Niji 視頻模型則爲動漫愛好者提供個性化創作工具。  

影視與廣告:高品質的動漫視頻和升頻技術將降低製作成本,助力中小企業快速產出專業內容。  

遊戲開發:Niji 視頻模型可用於生成角色動畫或過場動畫,加速開發流程。

AIbase 分析認爲,Midjourney 的視頻技術與 OpenAI 的 Sora、Runway AI 等競品形成直接競爭,但其獨特的藝術風格和低成本訂閱模式(V1視頻模型僅需10美元/月)使其在創作者社區中佔據優勢。

未來展望:邁向實時模擬

Midjourney 首席執行官 David Holz 曾表示,AI 視頻模型是公司邁向“實時開放世界模擬”目標的重要一步。 視頻升頻器和 Niji 視頻模型的開發不僅是技術層面的突破,也爲其未來的3D 開發和風格一致性優化奠定了基礎。 社區預計,這兩項功能可能在未來數月內進入測試階段,並逐步向訂閱用戶開放。

結語

Midjourney 的視頻升頻器與 Niji 視頻模型的開發展示了 AI 在動態內容生成領域的無限可能。從畫質提升到動漫視頻創作,這兩項技術將爲創作者提供更高效、更具藝術感的工具。