本文にスキップ
AI News HubLIVE
サイト内リライト2 分で読了

接地された3D点をアクションヘッドに直接注入することで、VLAの空間的・タスク的汎化が実現

記事の要約

Vision-Language-Action(VLA)モデルは空間的・タスク的汎化において脆弱性が残る。既存の言語プロンプトや視覚プロンプトによる接地では限界があることが分かった。研究者らは、接地信号を3D点として表現し、グリッパーとの相対変位を計算し、適応的層正規化を介して空間埋め込みをアクションヘッドに直接注入する軽量でモデル非依存のモジュールを提案。LIBERO-PROにおいて、GR00T-N1.6の平均成功率をタスク摂動下で31.2から77.5へ、位置摂動下で28.1から60.2へ向上させ、π₀.₅でも同様の改善を達成した。

ソースarXiv Robotics著者: Shiang-Feng Tsai, Jin-Cheng Jhang, Yen-Ling Tai, Jia-Hong Lai, Shih-Yun Wong, KangTung-Hsu, Yi-Ting Chen
接地された3D点をアクションヘッドに直接注入することで、VLAの空間的・タスク的汎化が実現
誤りを報告

訂正窓口はまだ利用できません。記事情報をコピーして保存できます。

訂正案内
本文へ

Vision-Language-Action(VLA)モデルは、大規模な視覚言語の事前学習を活用して柔軟なロボット操作を実現しているが、テスト時には二つの軸で脆さが残る。一つは空間汎化であり、物体の位置が訓練時と異なる場合に性能が低下する。もう一つはタスク汎化であり、見慣れたシーンに訓練時とは異なる言語指示が組み合わされると破綻しやすい。この脆さに対処するため、物体の位置特定や配置のための2次元ピクセル座標など、空間的・タスク認識的な情報をポリシーに与える手法が増えている。しかし本論文は、言語プロンプトや視覚プロンプトによる既存の表現ではこうした限界を解消できないと指摘する。対照的に、3次元点ベースの表現を用いてそれを直接アクションヘッドに投入すると大幅な改善が得られ、grounding信号をどう表現し、VLAにどう注入するかが本当の鍵であることが明らかになった。

そこで著者らは、軽量かつモデル非依存のモジュールを提案する。このモジュールはgrounding信号を3次元で表現し、グリッパーに対する相対変位を計算し、その結果得られる空間埋め込みをadaptive layer normalizationを通じてアクションヘッドへ直接注入する。モジュール全体は2層のMLPであり、VLAのバックボーンや事前学習パイプラインを変更する必要がない。そのため、既存の事前学習済みモデルの上に容易に追加できる。

実験はLIBERO-PROベンチマークで行われた。タスク摂動の条件では、GR00T-N1.6の平均成功率が31.2から77.5へ向上し、位置摂動の条件では28.1から60.2へ向上した。改善幅はそれぞれ46.3ポイントと32.1ポイントである。さらに$\pi_{0.5}$でも同等の改善が得られ、この機構が特定のバックボーンに依存しないことを示している。

論文の中心的な結論は、十分なgrounding情報を3次元に持ち上げてアクションヘッドへ直接注入すれば、VLAの空間汎化とタスク汎化の両方を解き放つことができるという点にある。しかもそれは、事前学習済みバックボーンの上に軽量なモジュールを一つ加えるだけで実現できる。本論文はShiang-Feng Tsai氏ら7名の著者によるもので、2026年6月26日にarXivへ投稿された。分野はロボティクス(cs.RO)で、論文番号はarXiv:2606.27663v1である。

要点と分析を開く

記事インテリジェンス

エンジニア上級

要点

  • 2層MLPモジュールがVLAバックボーンや事前学習パイプラインを変更することなく、3D接地信号をアクションヘッドに直接注入する。
  • LIBERO-PROで、GR00T-N1.6はタスク摂動下で31.2から77.5、位置摂動下で28.1から60.2に向上。
  • π₀.₅でも同様の向上が得られ、メカニズムがバックボーン非依存であることを示す。
  • 中心的な発見:接地を3Dに持ち上げ、アクションヘッドに直接注入することが、空間的・タスク的汎化を解き放つ鍵である。

要点と分析は自動生成され、誤りを含む場合があります。原典をご確認ください。