在非結構化和嘈雜的真實世界中，具備故障恢復能力是魯棒機器人的關鍵要求。然而，訓練這種能力需要大量包含恢復行為的資料，透過機器人遙操作收集此類資料耗時且難以規模化，因為誘導多樣化的故障狀態、執行糾正動作並重置環境非常低效。為了解決這一挑戰，來自佐治亞理工學院等機構的研究人員提出了一種名為EgoRecovery的新框架，該框架利用人類第一人稱影片作為可擴充套件的資料來源。
研究團隊設計了一套高效的任務級故障配置方案，讓人類操作者透過佩戴頭戴攝像機記錄短時恢復片段。實驗表明，在該協議下，人類操作者每小時可生成的有效恢復資料是傳統機器人遙操作的10倍以上。為了彌合人類與機器人之間的具身差異，EgoRecovery採用了一種協同訓練方法：將人類的恢復演示對齊到一個緊湊的糾正意圖空間，該空間同時包含機器人資料，並捕獲糾正的時機和幅度。僅需少量機器人恢復演示即可將這些意圖轉換為可執行的機器人動作。
在部署階段，系統透過一個學習得到的恢復門控機制，從機器人觀測中預測何時需要糾正，並僅在恢復狀態下啟用糾正意圖。研究人員在真實世界的恢復任務上進行了實驗，結果顯示EgoRecovery在故障起始後的成功率上優於僅使用機器人恢復資料、直接協同訓練人類恢復資料以及直接意圖遷移等基線方法。該工作為機器人故障恢復提供了一種可擴充套件且高效的解決方案，有望推動機器人在複雜環境中的自主操作能力。