AI技術によってアニメ制作プロセスを簡素化 ToonComposerが自動色付けとアニメーション生成を実現

アニメ制作の分野では、従来のアニメ制作プロセスは時間がかかり、多くの労力がかかるもので、通常、高度なアーティストによるキーフレームの描画、インターポレーション、色付けなどの複数の工程を必要としています。しかし、中国香港中文大学と騰訊 PCG の研究チームが開発した ToonComposer により、このプロセスは大幅に簡略化され、生成型AI技術を利用して、煩雑な手作業をスムーズなプロセスに変えることができました。

ToonComposer の「生成後インターポレーション」技術は、ユーザーが1枚のスケッチと1フレームのカラーマップを提供するだけで、完全なアニメーションビデオを生成でき、人間の作業時間を最大70%も節約し、クリエイターが創作そのものにさらに多くの精力を注ぐことができるようになります。

キーフレーム制御においては、ToonComposer は正確なスケッチキーフレーム制御機能を提供しており、アーティストはタイムラインの任意の位置で疎なキーフレームを使用してアニメーションの進行を導くことができます。複雑な動きであっても、このシステムは正確に処理し、生成結果の品質は従来の手動のインターポレーションや色付けプロセスと同等です。

また、ToonComposer は領域制御機能を導入しており、ユーザーは特定のスケッチ領域を空白にして、ブラシツールでマーキングすることができます。システムはこれらの領域をスマートに認識し、コンテキストやヒントを使ってフィルタリングし、創作効率をさらに向上させます。

研究チームは、B&T Studio および古洞アニメーションスタジオに感謝の意を表し、『大魚海棠』や『ミャー・サマ』などのアニメーションコンテンツを学術展示に使用することを許可してくれたことに感謝しています。また、動画ベースモデルの Wan および他のオープンソースツールへの支援にも感謝します。注意すべき点は、ページ上に表示されているすべての画像、動画、およびその他の資料は、学術的および研究目的のためにのみ使用されており、ToonComposer は研究プロジェクトであり、商業用途には意図されていないということです。

プロジェクト:https://lg-li.github.io/project/tooncomposer/

ポイント:  

🎨 ToonComposer は生成型AI技術を通じて、アニメーション制作プロセスを簡略化し、ユーザーが1枚のスケッチと1フレームのカラーマップを提供するだけで、完全なアニメーションを生成できます。

⏳ このシステムは最大70%の人間の作業時間を節約し、クリエイターが創造に集中できるようにします。

🖌️ 領域制御機能を提供し、ユーザーはスケッチ領域を自由にマーキングでき、システムがスマートにフィルタリングし、創作効率を向上させます。