本文にスキップ
AI News HubLIVE
サイト内リライト2 分で読了

E0.5:ロボットの世界-行動モデリングに向けた、再構成から未来予測へ至る3D基盤モデル

記事の要約

E0.5は3D基盤モデルを主要バックボーンとする幾何ネイティブな世界-行動モデルであり、3D幾何を世界モデリングと行動予測のネイティブ表現として扱い、将来の3D状態を明示的に予測する。具身データ事前学習なしでRoboTwin 2.0のクリーン設定とランダム化設定でそれぞれ89.90%と50.09%の成功率を達成し、AgiBotWorld-Betaの16万超の軌道で事前学習後、AgileX PiperとZerith H1の実世界操作成功率が約15ポイントと7ポイント向上した。

ソースarXiv Robotics著者: Era AI Lab Team, Jianhao Lai, Zhihao Zhan, Zhiquan Liao, Qichang Li, Shubin Chen, Zhiyuan Liu, Hongsen Lei, Jianman Lin, Xiaoxin Lin, Ke Gong, Baiyue Gu, Shiming Chen, Junlin He, Longqi Yang, Junrong Xiao, Haolin Luo, Xiaojuan Su, Jianfeng Li, Yu Luo, Xu Sun, Likui Zhang, Jusheng Zhang, Qinhan Lyu, Tianshui Chen, Liang Lin, Guangrun Wang
E0.5:ロボットの世界-行動モデリングに向けた、再構成から未来予測へ至る3D基盤モデル
誤りを報告

訂正窓口はまだ利用できません。記事情報をコピーして保存できます。

訂正案内
本文へ

世界-行動モデル(WAM)は具現化知能を実現する有望な枠組みとされるが、主流のアプローチは依然として動画基盤モデルや視覚-言語モデルを中心としている。VGGTなどの3Dモデルから抽出した幾何特徴を組み込む場合でも、それらは通常、動画モデルやVLMという主要バックボーンへの補助入力または予測対象として渡されるだけで、3D幾何が世界モデリングのネイティブな基盤になっているわけではない。X-Era AI Labのチーム(Jianhao Laiら26名)が提案するE0.5は、この状況を変えようとするものである。

E0.5の中心的な考え方は、3D基盤モデルの上に直接構築された幾何ネイティブな世界-行動モデルである。革新的な点は二つある。第一に、3D基盤モデルを主バックボーンとして採用し、世界モデリングと行動予測の双方にとって3D幾何をネイティブ表現とする。第二に、行動を予測するだけでなく将来の3D状態も明示的に予測することで、行動のみのモデリングや将来動画予測を超えた幾何レベルの世界ダイナミクスを学習する。

実験はまずRoboTwin 2.0のシミュレーションベンチマークで行われた。具身データによる事前学習を一切行わなくても、クリーン設定で89.90%、ランダム化設定で50.09%の成功率を達成し、幾何ネイティブなバックボーンの有効性を初期段階で示した。

その上で研究チームは、AgiBotWorld-Betaの16万件を超えるロボット軌道でE0.5を具身事前学習し、事前学習済み3D基盤モデル内でロボット行動と将来幾何を同時に学習した。この具身事前学習により、実世界の操作タスクで顕著な改善が得られ、AgileX Piperでは平均成功率が約15ポイント、Zerith H1では約7ポイント向上した。

これらの結果は、幾何ネイティブな基盤モデルがロボットのインタラクション知識を獲得し、それを物理的な操作タスクへ転移できる可能性を示している。E0.5はVWAファミリーの世界-行動モデルの一員であり、この幾何ネイティブな路線を体現している。論文は2026年10月26日にarXivへ投稿され、番号はarXiv:2610.36011、分野はロボティクス(cs.RO)、全文サイズは約14MBである。

要点と分析を開く

記事インテリジェンス

エンジニア上級

要点

  • E0.5は3D基盤モデルを主要バックボーンに採用し、幾何を補助入力ではなく世界モデリングと行動予測のネイティブ表現とする。
  • 将来の3D状態と行動を同時に予測することで、行動のみや将来動画予測を超えた幾何的な世界ダイナミクスを捉える。
  • 具身データ事前学習なしでRoboTwin 2.0のクリーン設定89.90%、ランダム化設定50.09%の成功率を記録。
  • AgiBotWorld-Betaの16万超の軌道で事前学習すると、AgileX PiperとZerith H1の実世界成功率が約15ポイントと7ポイント向上。

要点と分析は自動生成され、誤りを含む場合があります。原典をご確認ください。