今年のアドビ・マックスで、アドビは写真、動画、音声のクリエイター向けに、よりスマートで直感的な編集体験を提供する、まだ研究開発段階にあるAI実験用ツールのシリーズを紹介しました。これらのツールは「アドビ・スニークス」と呼ばれており、今後のクリエイティブ生産性の可能性を示しています。一括りに光の再構築から音声のスマート修正まで、AIは創作プロセスを完全に再構築しています。

「フレーム前移」：動画編集が写真編集のように簡単になる

注目すべき新機能の一つは「フレーム前移（Project Fast Frame）です。このツールを使えば、面倒なマスクを使わずに動画にコンテンツを追加したり削除したり置き換えたりできます。

アドビのデモでは、動画の最初のフレームに映る女性を削除する例が紹介されました。AIは対象を自動認識し、自然な背景を補完します。Photoshopの「コンテント感知フィル」に似ていますが、この変更は動画全体に自動的に適用されます。

さらに驚くのは、ユーザーが画面内で領域を描き、プロンプトを入力することでオブジェクトを挿入できる点です。AIはシーンに合わせて光と透視関係を自動的に調整します。例えば、動画に水たまりを追加すると、猫が通ったときの反射をリアルタイムで表現でき、非常に高い物理的および意味的理解力を示しています。

Project Light Touch：AIによる光の魔術師

Project Light Touchは、ユーザーがスタジオの照明を操作するように自由に写真の光源を制御できるようにします。生成型AIを活用して、ユーザーは光の方向や拡散、色温度を再定義し、元の画像には存在しない照明効果を実現できます。

例えば、部屋が点灯していない照明で照らされているように見せたり、仮想の光源をドラッグして人物の周りを移動させたりできます。また、「ダイナミック照明」により、昼夜の切り替えやイベントの雰囲気作りなども可能です。

Light Touchの細かい光と影のコントロール能力により、写真家やデザイナーは後工程で物理的に現実に近い照明の再構築が可能となり、創造の自由度が大幅に向上します。

Project Clean Take：音声修復の再定義

音声分野では、アドビはProject Clean Takeという、音声の発音や感情表現を自動的に修正するAIツールをリリースしました。

クリエイターは再録音をすることなく、テキストのプロンプトを使って話者のトーン、テンポ、または感情を調整できます。例えば、声をより自然で楽しく、または好奇心あるものに変えることができます。

このツールは環境ノイズと音声トラックを自動的に分離し、ユーザーは特定の音源を個別に調整またはミュートできます。音声の明瞭さを保ちながら背景の雰囲気を維持できます。

これは、動画クリエイターやパーソナラーや制作スタッフにとって、後工程での音声修正がより効率的になることを意味し、場合によっては「感情の編集」さえ可能になります。

その他のAI実験：素材の交換から3Dビジュアルの再構築まで

上記の3つの主要ツールに加えて、アドビは複数のビジュアル分野での革新プロジェクトも紹介しました：

  • Project Surface Swap：オブジェクトや表面の素材やテクスチャを即座に変更;

  • Project Turn Style：画像内のオブジェクトを回転させ、3Dモデルのように異なる角度から見たり編集したり;

  • Project New Depths：平面画像に深度情報を付与し、物体の遮蔽関係を識別し、3D空間のような編集体験を実現。

これらのSneaksは、アドビが生成型AI、ビジュアル理解、空間認識の分野で行っている先進的な探求を示しています。

未来への展望：実験から標準へ

現在、これらのSneaksは内部プレビュー機能であり、それがAdobe Creative CloudやFirefly製品ラインに統合されるかどうか、あるいはいつ統合されるかはまだ決まっていません。しかし、歴史的な経験から見ると、現在広く使用されている機能—たとえばPhotoshopの「不要物除去（Remove Distractions）」や「調和（Harmonize）」—はすべてSneaksプロジェクトから生まれました。