AI視頻生成領域迎來關鍵升級。由a16z投資的3D與AI視頻公司Luma AI近日推出全新模型 Ray3Modify，首次實現在保留原始演員表演精髓的前提下，對已有實拍視頻進行高保真AI修改——無論是更換角色外觀、切換服裝、變換場景，還是生成平滑過渡鏡頭，演員的動作節奏、眼神方向、情感表達均被完整保留。

這一突破直擊創意工作室的核心痛點:傳統AI視頻工具雖能生成驚豔畫面，卻難以控制細節，導致演員的真實表演在後期處理中丟失。而Ray3Modify通過引入角色參考圖（character reference image）和起止關鍵幀(start/end frames)，實現了“表演不變、表現可變”的精準編輯。

image.png

具體而言，用戶只需提供一段實拍視頻和目標角色的形象參考（如動漫人物、歷史角色或品牌虛擬代言人），Ray3Modify即可將演員的外貌無縫轉化爲新角色，同時忠實保留其原始表演——包括微妙的表情變化、肢體語言和情緒張力。此外，通過設定起始與結束幀，創作者還能指導AI生成可控的過渡鏡頭，實現角色行走、轉身、表情漸變等連貫動作，確保場景間敘事流暢。

“生成式視頻極具表現力，但往往難以控制，”Luma AI聯合創始人兼CEO Amit Jain表示，“Ray3Modify將真實世界與AI的創造力融合，賦予創作者完全掌控權。現在，團隊只需用普通攝像機拍攝一次表演，就能用AI將其置於任何想象中的場景中——換裝、換地、甚至‘重拍’，而無需重新搭景或召集演員。”

該模型現已集成至Luma的 Dream Machine 平臺，面向專業創作者開放。作爲Runway、Kling等公司的有力競爭者，Luma此次更新進一步鞏固其在可控生成視頻領域的技術優勢。

此次發佈亦得益於公司強勁的資本支持:2024年11月，Luma剛完成9億美元鉅額融資，由沙特主權財富基金旗下的AI公司Humain領投，a16z、Amplify Partners、Matrix Partners等老股東跟投。據悉，Luma還計劃與Humain在沙特合作建設一座2GW規模的AI算力集羣，爲未來高負載視頻生成任務提供基礎設施保障。

當AI不再只是“生成內容”，而是“增強表演”，影視、廣告、遊戲等行業的工作流或將被徹底重構——真實人類的表演力，與AI的想象力，終於在同一幀畫面中完美共存。