最近、MirageLSDが世界初の人工知能ライブストリーム拡散(Live-Stream Diffusion、LSD)モデルとして正式にリリースされ、その強力なリアルタイム動画変換能力が業界で話題を呼びました。Decart AIチームによって開発されたこの革新的なモデルは、40ミリ秒未満の超低遅延で任意の動画ストリームをユーザーが望むシーンにリアルタイムで変換でき、ライブ配信、ゲーム開発、アニメ制作、仮想着せ替えなどのシーンに前例ない可能性をもたらします。

 リアルタイム動画変換、従来の制約を突破

MirageLSDのリリースにより、動画生成技術は新たな段階に入りました。従来の動画拡散モデルが数秒乃至数十分かかる処理時間に対して、MirageLSDは24フレーム/秒の動作速度と40ミリ秒未満の応答遅延を実現し、無限長の動画ストリームをリアルタイムで処理できます。この突破は、CUDA Megakernel最適化やドリフト耐性トレーニングなどのチームの技術革新により達成され、全体の効率は100倍以上向上し、従来の動画生成モデルの遅延と長さのボトルネックを完全に打ち破りました。

image.png

カメラ、ビデオチャット、コンピュータ画面、ゲーム画面などからの入力でも、MirageLSDはリアルタイムでユーザー指定のシーンに動画コンテンツを変換できます。例えば、通常のビデオ通話を星間冒険に変えることや、現実の棒闘争を光剣戦に変えることも可能です。このような無限生成とリアルタイム相互作用の能力により、ユーザーはこれまでにない創造の自由を得ます。

 シンプルな操作、クリエイティブな潜在能力の解放

MirageLSDは技術的に非常に強力であるだけでなく、操作方法も非常に簡単です。手のジェスチャー制御などの単純なインターフェースを通じて、ユーザーはリアルタイムで動画内の外観、シーン、または服を変更できます。例えば、ライブ配信中に手を振るだけで背景を熱帯雨林に切り替えたり、自分の服を仮想の未来戦甲に変えることができます。このような直感的な操作方式により、技術のハードルが大幅に低下し、一般のユーザーでも簡単に使いこなせ、驚くべき視覚効果を生み出すことができます。

また、MirageLSDは連続的なプロンプトと編集をサポートしており、ユーザーは動画生成中に内容を動的に調整し、出力画像が常にアイデアと一致していることを保証できます。この高い柔軟性とコントロール性により、MirageLSDはクリエイティブなコンテンツ制作において大きなポテンシャルを示しています。

 多様なシナリオへの支援、30分でゲームを開発

MirageLSDの応用シナリオは非常に広範囲であり、特にゲーム開発分野では驚異的なポテンシャルを示しています。開発者はMirageLSDを使用してわずか30分で迅速にゲームを構築でき、このモデルがすべてのグラフィック効果を自動処理します。例えば、任意の動画ストリームやゲーム画面を入力すると、MirageLSDはリアルタイムで新しい仮想世界に変換できます。ファンタジーの森やサイバーパンク都市など、あらゆる場面を簡単に実現できます。

ゲーム開発以外にも、MirageLSDはライブ配信、アニメ制作、仮想着せ替えなどの分野で大きな価値を示しています。ホストはこの技術を利用してライブ配信のシーンをリアルタイムで変更でき、アニメクリエイターは動的視覚効果を迅速に生成できます。仮想着せ替え機能は、ECやファッション業界に革新的な展示方法を提供します。これらの応用シナリオの広範さにより、MirageLSDはクロスインダストリーの汎用ツールとなっています。

 技術革新、業界の未来をリード

MirageLSDの核心技術であるライブストリーム拡散(LSD)モデルは、Diffusion Forcing技術に基づいており、フレームごとのノイズ除去と歴史強化トレーニングを通じて、従来の自己回帰モデルにおける長時間生成時の誤差蓄積問題を解決しました。他の動画生成モデルと比較して、MirageLSDは無限長の動画を生成できるだけでなく、映像の時間的一貫性と高品質な出力を維持でき、リアルタイム相互作用アプリケーションの堅固な基盤を築いています。

さらに、MirageLSDの開発チームは、効率的なGPUアセンブリコードと数学的最適化について深く探求し、モデルの動作効率を著しく向上させました。この技術革新は、動画生成技術の発展を推進するだけでなく、今後のマルチモーダルAIモデル(音声、感情、音楽など)の道を開きました。

動画生成の新時代

AI分野の先駆者として、MirageLSDのリリースは動画生成技術にとって新たな章を開いたものです。そのリアルタイム性、無限生成能力、およびシンプルなインタラクション特性により、コンテンツ制作の方法が完全に変わります。個人クリエイターから大企業まで、MirageLSDは強力なツールを提供し、クリエイティブが技術的障壁によって制限されることなくなります。AIbaseによると、この技術の広範な適用により、AIと現実世界の融合が加速され、多くのイノベーションのシナリオが生まれることになります。

現在、MirageLSDは試用版が公開されており、ユーザーは公式ウェブサイトでその強力な機能を体験できます。今後、Decart AIチームはMirageLSDを基盤としたより多くの動画モデルをリリースし、音声、感情、音楽などのマルチモーダル領域をカバーし、AIの境界をさらに広げていきます。

体験アドレス:https://mirage.decart.ai/