NVIDIA、Apple Vision Proを用いたロボットトレーニングを可能にするGroot Teleop技術を発表

未来、人型ロボット市場は380億ドル規模に達すると予測されています。特に産業・製造分野におけるこの巨大な市場需要に応えるため、NVIDIAは先日、次世代人型ロボットの開発を加速させるための、一連のロボット基礎モデル、データパイプライン、シミュレーションフレームワークを発表しました。

NVIDIAの創業者兼CEOであるジェンスン・フアン氏は、CESでIsaac GR00Tの青写真を公開しました。この青写真は、合成運動生成を通じて、模倣学習を利用して大量の合成運動データを作成し、人型ロボットのトレーニングを支援することを目指しています。

模倣学習はロボット学習の一分野であり、人型ロボットが専門家の人間の模範を観察・模倣することで新しいスキルを習得することを可能にします。これらの高品質なデータセットを現実世界で収集するには、時間と費用がかかりますが、Isaac GR00Tの青写真を使用することで、開発者は少量の人間の模範から簡単に大量の合成データセットを生成できます。

開発者はGR00T-Teleopワークフローから開始し、Apple Vision Proを使用してデジタルツイン内の人間の動きをキャプチャできます。次に、GR00T-Mimicワークフローを使用して、これらの人間の模範をより大きな合成運動データセットに拡張し、最後に、GR00T-GenワークフローはNVIDIA OmniverseとCosmosプラットフォームのサポートを受けて、ドメインランダム化と3Dアップグレードによってデータセットをさらに拡張します。これらのデータセットは、ロボット戦略への入力として使用でき、ロボットが環境とより効率的かつ安全にインタラクトするのに役立ちます。

さらに、NVIDIAはCESでCosmosプラットフォームも発表しました。このプラットフォームには、物理的に意識のあるビデオとワールドステートを生成し、物理AIの発展を促進することを目的とした、一連のオープンな事前トレーニング済みワールド基礎モデルが含まれています。これらのモデルは18兆個のデータユニットでトレーニングされており、200万時間分の自動運転、ロボット、ドローンビデオなどのデータが含まれています。Cosmosは、大規模なデータセットを生成できるだけでなく、画像の3Dから現実へのアップグレードを通じて、シミュレーションと現実のギャップを縮小します。

総合的に見ると、NVIDIAのIsaac GR00T、Omniverse、Cosmosは、物理AIと人型ロボットのイノベーションを推進しています。ボストン・ダイナミクスやFigureなど、多くのロボット企業がIsaac GR00Tを採用し、良好な成果を上げています。人型ロボットのソフトウェア、ハードウェア、製造メーカーは、NVIDIAの人型ロボット開発者プログラムへの早期アクセスを申請できます。