アリババEMOフレームワークによる動画生成技術の強化、キャラクターアバターによる歌唱と口パク動画生成を実現

アリババのEMOフレームワークは、音声プロンプトと顔の動きとの関連性に注目することで、ヘッドビデオ生成のリアルさ、自然さ、表現力を向上させます。EMOは、さまざまな言語の歌や音声の生成に対応しており、キャラクターのアバターに豊かな表情と動きを与えることができます。さらに、EMOは異なるキャラクター間の連携も実現し、ビデオ生成の可能性を広げます。