NVIDIAとHugging Face、オープンロボティクスコミュニティ向けに新モデルとフレームワークをLeRobotへ提供
NVIDIAとHugging Faceは、ヒューマノイドロボット向けのNVIDIA Isaac GR00T 1.7モデルとIsaac TeleopフレームワークをLeRobotに統合し、さらにNVIDIA Cosmos 3の追加も計画しています。これらの統合により、開発者はロボット開発のためのよりアクセスしやすく標準化されたパスを得られ、オープンロボティクスコミュニティの革新を促進します。
オープンソースAIは、モデル、データ、ツールが共有されるときに開発者がどれだけ迅速に革新できるかを示してきました。ロボティクスにも同じ機会がありますが、物理AI開発の進歩は、大規模データセットやロボット基盤モデル、シミュレーション、計算、検証ツールといった、高コストで断片化されたリソースによって依然として妨げられる可能性があります。
NVIDIAとHugging Faceは、ヒューマノイドロボット向けのオープンな推論視覚言語行動（VLA）モデルであるNVIDIA Isaac GR00T 1.7と、ロボットデータ収集のためのオープンソースフレームワークであるNVIDIA Isaac Teleopを、Hugging FaceのオープンソースロボティクスライブラリであるLeRobotに統合するために協力しています。さらに、物理AIのためのフロンティアモデルであるNVIDIA Cosmos 3も近日中に追加される予定です。これらの統合により、開発者はエンドツーエンドのロボット開発のためのよりアクセスしやすく標準化されたパスを得られ、オープンロボティクスコミュニティ全体の革新とコラボレーションを促進します。
Hugging Faceの共同創設者兼チーフサイエンスオフィサーであるThomas Wolf氏は次のように述べています。「オープンソースは、分野が高度な研究を人々が研究、適応、構築できるものに変える方法です。NVIDIA Isaac GR00T 1.7とIsaac TeleOpが今日LeRobotに搭載されたことで、ロボティクス開発者は共有モデル、データ、ワークフローを使用してロボットを公開トレーニングおよび評価できます。そして、NVIDIA Cosmos 3が次に計画されていることで、コミュニティはフロンティア世界モデルを同じコラボレーションループに持ち込むパスを得ることになります。」
Hugging Face LeRobotは、ロボットデータセット、モデル、ポリシー、ワークフローをトレーニング、実行、共有するためのオープンソースロボティクスライブラリです。NVIDIAとHugging Faceの継続的なパートナーシップは、NVIDIAの300万人のロボティクス開発者をHugging Faceの1600万人のAI構築者と結びつけ、オープンワークフローを通じてフロンティア物理AIツールへのアクセスを拡大します。
NVIDIA物理AI機能をLeRobotに統合することで、開発者はデータの収集と標準化、ロボット基盤モデルのトレーニングと微調整、パフォーマンスの評価、オープンワークフローを通じたモデルのデプロイのための共通の方法を得られます。統合内容は以下の通りです：
- NVIDIA Isaac Teleop：ロボットデータ収集のためのオープンソースフレームワーク。開発者が外部デバイスから高品質な人間のデモンストレーションを標準化された相互運用可能な形式でキャプチャし、データセットを拡張してコミュニティと共有することを可能にします。すべてLeRobot内で直接行えます。
- NVIDIA Isaac GR00T 1.7：最初のオープンで商業的に viable なロボット基盤モデル。LeRobotワークフローを通じて後トレーニングとデプロイが容易になり、開発者がGR00Tを新しいロボットの形態やタスクに適応させ、ベンチマークされたパフォーマンスを提供します。
- NVIDIA Cosmos 3：物理AIのためのフロンティア世界基盤モデル。近日中にLeRobotに追加される予定で、ロボティクスデータの生成と拡張、シナリオのシミュレーション、実世界データが限られているか収集コストが高すぎる場合のポリシー開発を支援します。
これらの統合は、完全なロボティクス開発ループをサポートするためにすでにLeRobotに接続されているより広範なNVIDIAリソースセットに基づいています。これには以下が含まれます：
- 最大のオープンソース物理AIデータセット（ダウンロード数1500万回以上）。35万以上の実世界およびシミュレーション軌跡と5700万のグラスプを含み、開発者がロボティクスワークフローを開始するのに役立ちます。
- NVIDIA Isaac SimおよびIsaac Labベースのシミュレーションフレームワーク。開発者が環境を設定し、ロボットデータを生成し、ポリシーをテストし、物理ロボットに移行する前に動作を検証するのに役立ちます。
- LeRobot環境ハブ内のNVIDIA Isaac Lab-Arena。開発者が複雑なシミュレーション環境を迅速にプロトタイプし、LeRobot EnvHubに登録し、LeRobotエコシステム内でシームレスに使用してGR00T、Pi、SmolVLAなどの汎用ロボットポリシーをトレーニングおよび評価できるようにします。
- NVIDIA Jetson ThorとLeRobotのReachy 2との統合。オープンソースのヒューマノイドロボット上でのVLAモデルのデプロイをサポートします。
Isaac Teleop、Isaac GR00T 1.7、Isaac Lab-ArenaをLeRobotとともにエンドツーエンドのヒューマノイド開発に使用する方法の詳細と、詳細なLeRobot統合ワークフローについては、こちらをご覧ください。