CES 2024 において、 Nvidia は人工知能とロボット工学の分野で大きな前進を遂げ、画期的な基盤AIモデル群である Cosmos を発表しました。この開発は、AI、ロボット工学、自律走行車の融合における重要な転換点となり、機械が物理的な世界とどのように相互作用するかを根本的に変えることが期待されています。
Cosmos の概要
Cosmos は、クリエイティブなコンテンツ生成ではなく、物理的な世界の理解に焦点を当てたAIモデルトレーニングの根本的な転換を表しています。このプラットフォームは、2,000万時間に及ぶ実世界の映像データを使って訓練され、人間の動き、相互作用、操作を捉えています。この広範な訓練により、 Cosmos は人型ロボットから自律走行車まで、様々な自律システムの訓練に使用できる現実的なシミュレーションと3Dモデルを生成することができます。
トレーニングデータ：2,000万時間分の人間の動作および相互作用の映像記録
 |
|---|
| NVIDIA Cosmos のビデオ検索インターフェースに表示された、実世界シナリオのシミュレーションを示す様々な夜間シーン |
Toyota との提携と自動車への応用
画期的な展開として、 Nvidia は世界最大の自動車メーカーである Toyota との提携を実現しました。この協力関係により、 Nvidia の自律走行用チップとソフトウェアが複数の Toyota 車種に搭載されることになります。この提携では、 Nvidia の物理シミュレーションツールである Omniverse と連携して、数千回の実際の走行データを数十億マイルの訓練データに変換することが可能になります。
統合: Nvidia の Omniverse 物理シミュレーションツールとの互換性を確保
先進的なロボット訓練
Cosmos は、特に産業環境におけるロボット訓練に革新的なアプローチを導入しています。少数の実世界の例から合成訓練データを生成できるため、ロボットに新しいタスクを教えることが格段に効率的になります。この機能は特に倉庫運営において価値があり、ロボットはシミュレーション環境を通じて、事故の認識と対応を含む様々なシナリオを学習することができます。
 |
|---|
| 産業用アプリケーションにおけるロボット訓練の進歩を象徴する、ステアリングホイールを保持するロボットアーム |
業界での採用と実装
Agility や Figure AI といった人型ロボット開発企業、さらに Uber 、 Waabi 、 Wayve などの自律走行車企業を含む多くの著名企業が、すでに Cosmos を採用しています。このプラットフォームは GitHub でオープンソースとして公開されており、ロボット工学コミュニティでのより広範な採用と開発を促進しています。
配布方法：GitHub 上でオープンソースとして利用可能
将来への影響
Nvidia の CEO である Jensen Huang は、自律走行車を最初の1兆円規模のロボット市場として展望しています。 Cosmos と Apple Vision Pro ヘッドセットのような新興技術との統合は、人間のデモンストレーション capture により、ロボットの訓練がますます直感的で効率的になる未来を示唆しています。 Huang が述べるように、「ロボット工学における ChatGPT の瞬間は目前に迫っている」という言葉は、この技術の変革的な可能性を示しています。