本文にスキップ
AI News HubLIVE
サイト内リライト2 分で読了

位相条件付き方策最適化による多段階ロコマニピュレーションの学習

記事の要約

本論文はPPOを拡張し、位相条件付きクリティック、位相ゲート付き報酬関数、多段階リセットカリキュラムを用いて、長期的な全身ロコマニピュレーションを単一の方策で学習する手法を提案する。Unitree G1とマニピュレータを搭載したBoston Dynamics Spotの実機で多段階スキルを実証し、人間の動作データへの依存を避けている。

ソースarXiv Robotics著者: Simone Manni, Annika Wollschl\"ager, Dario Bellicoso, Abel Gawel, Marco Hutter, Simon Le Cleac'h, Jan Br\"udigam
位相条件付き方策最適化による多段階ロコマニピュレーションの学習
誤りを報告

訂正窓口はまだ利用できません。記事情報をコピーして保存できます。

訂正案内
本文へ

複雑な全身ロコマニピュレーションでは、単一の長期的タスクの中で、しゃがむ、把持する、移動するといった多様な動作を連続して実行する必要がある。単純なピックアンドプレースはすでに確立されているが、複雑で長期的なタスクへ拡張することは依然として難しい。現在この課題は、人間の動作データとそれに対応するヒューマノイドプラットフォームに依存することで対処されているが、プラットフォームの独立性が制限され、データ処理の大きなオーバーヘッドも生じる。

これに対し、Simone Manni氏ら著者は位相条件付き方策最適化という手法を提案する。近接方策最適化(PPO)を拡張し、タスクの事前構造を利用して行動を形成することで、多様なロボットハードウェアにまたがる多段階タスクを単一の方策で学習する。

具体的には、PPOに対して三つの変更を加える。現在のタスク段階を認識できる位相条件付きクリティック、対応する段階でのみ有効になる位相ゲート付き報酬関数、そして探索を段階的に導く多段階リセットカリキュラムである。

ハードウェアの差異に対応するため、著者らは低レベルのバランス動力学と高レベルの位相実行を分離する疎結合な階層制御アーキテクチャを採用している。これにより、同じ高レベル方策の論理を異なる形態のロボットに適用できる。

著者らはUnitree G1、およびマニピュレータを搭載したBoston Dynamics Spotの実機上で多段階のロコマニピュレーション技能を実証し、アブレーション実験を通じて各設計上の選択の効果を検証した。本手法は環境との相互作用のみを通じて複雑な行動を獲得し、高レベルのタスク構造を方策学習に直接組み込むため、外部の人間動作データへの依存を避けられる。

本論文はロボティクス(cs.RO)分野に属し、arXiv:2610.36270として2026年10月26日に投稿された。全文サイズは約5,987 KBである。

要点と分析を開く

記事インテリジェンス

投資家上級

要点

  • 位相条件付きクリティック、位相ゲート付き報酬、多段階リセットカリキュラムにより、高レベルのタスク構造を方策学習に直接組み込む
  • 低レベルのバランス制御と高レベルの位相実行を分離する疎結合な階層制御アーキテクチャで多様なハードウェアに対応
  • Unitree G1とマニピュレータ付きBoston Dynamics Spotの実機で多段階ロコマニピュレーションを実証し、アブレーションで設計を検証
  • 人間の動作データやヒューマノイド固有のプラットフォームに依存せず、環境との相互作用のみから複雑な行動を獲得

要点と分析は自動生成され、誤りを含む場合があります。原典をご確認ください。