跳到主要內容
AI News HubLIVE
更多
站內改寫1 分鐘閱讀

PRISM:用於互動結構運動控制的多項式表示

文章摘要

PRISM是一種新的策略表示方法,透過顯式建模物理變數之間的多項式互動,提高了機器人運動控制的效能和柔順性,在強化學習和模仿學習中均優於標準MLP。

來源arXiv Robotics作者: Seung Hyun Lee, Stella X. Yu
PRISM:用於互動結構運動控制的多項式表示
回報錯誤

更正管道尚未開通,可先複製下方文章資訊留存。

查看更正說明
直接讀正文

研究人員提出了一種名為PRISM(Polynomial Representations for Interaction-Structured Motor Control)的新型策略表示方法,旨在透過顯式建模機器人觀測變數之間的多項式互動來提升運動控制效能。傳統的機器人策略通常使用多層感知機(MLP)將觀測對映到動作,但許多與動作相關的線索(如功率、慣性效應、接觸、滑動和柔順性)依賴於訊號之間的乘積。PRISM透過一個因子化多項式模組高效地暴露高階互動特徵,避免了列舉所有多項式項。該模組將多項式分解為多個因子的乘積,從而在保持表達力的同時降低計算複雜度。

在強化學習(RL)框架中,PRISM保留了標準MLP主幹網路,但在其輸出之後應用了一個逐步啟用的逐元素多項式函式。這種設計使得網路能夠逐漸學習到變數之間的非線性互動,而不會破壞預訓練的特徵表示。在模仿學習場景中,PRISM用端到端訓練的多項式層替換了擴散策略中的線性本體感受條件化,從而允許模型直接學習到關節位置與速度之間的高階關係。

實驗覆蓋了人形機器人 locomotion 和接觸豐富的操作任務,包括步行、跑步和操縱物體等。結果表明,PRISM的效能顯著優於標準MLP策略,並且甚至優於具有匹配容量的大型MLP。這一發現證明了互動結構無法僅透過增加網路容量來替代,顯式建模多項式互動是關鍵。

此外,PRISM還展現出無感測器的柔順行為,無需力、力矩、觸覺輸入、接觸標籤或導納控制。這意味著機器人可以在沒有昂貴力感測器的情況下實現順應性操作,大大降低了硬體成本。這些結果強烈表明,多項式表示應成為具身運動控制的標準架構選擇,專案頁面已公開提供更多細節。

展開要點與分析

文章情報

工程師進階

要點

  • PRISM顯式學習物理變數之間的高階互動特徵,而非依賴MLP隱式建模。
  • 在強化學習中,PRISM在MLP後新增逐步啟用的多項式函式;在模仿學習中,用多項式層替換線性條件化。
  • 實驗表明,PRISM在人形機器人和接觸豐富的操作任務中優於標準MLP及更大容量的MLP。
  • PRISM無需力、扭矩或觸覺感測器即可實現無感測器的柔順行為。

要點與分析由自動化流程生成,可能有誤,請結合原始來源核實。