跳到主要內容
AI News HubLIVE
站內改寫1 分鐘閱讀

超越專家使用者:智慧體應幫助使用者構建偏好,而非僅挖掘偏好

文章摘要

傳統智慧體假設使用者具有明確偏好,但現實中使用者常缺乏領域知識。本文提出CoPref模型與CoShop基準,發現前沿模型在5輪互動後準確率不超過56%,失敗原因在於未能幫助使用者擴充套件對自身需求的認識。

來源arXiv AI作者: Irena Saracay, Ludwig Schmidt, Carlos Guestrin
超越專家使用者:智慧體應幫助使用者構建偏好,而非僅挖掘偏好
回報錯誤

更正管道尚未開通,可先複製下方文章資訊留存。

查看更正說明
直接讀正文

近年來,人工智慧智慧體(如推薦系統)通常假設使用者是“專家使用者”,即擁有明確且成形的偏好。當任務描述不完整時,這類智慧體會預設透過追問來澄清需求。然而,一項新研究指出這一假設並不現實。使用者往往缺乏足夠的領域知識來形成完整的偏好;當被問及對某個特徵的偏好時,如果沒有智慧體幫助學習必要的知識(例如透過示例或解釋),使用者可能根本無法回答。

為了形式化這一原則,研究人員借鑑資訊經濟學中的“搜尋-體驗-信任”框架,提出了CoPref模型。該模型描述了使用者如何基於智慧體的對話行為構建偏好。CoPref將使用者偏好分為三類:搜尋品(可事先評估)、體驗品(需使用後評估)和信任品(即使使用後也難以評估)。透過這一分類,智慧體可以識別使用者缺乏知識的環節,並主動提供資訊。例如,當使用者對某種產品的技術引數不熟悉時,智慧體可以提供對比示例來幫助理解。

在此基礎上,研究團隊構建了名為CoShop的互動式基準測試。在CoShop中,智慧體需要與遵循CoPref模型的使用者對話並提供推薦。智慧體的表現取決於它能否幫助使用者獲得準確描述任務所需的知識。實驗評估了五種前沿模型(如GPT-4、Claude等),結果發現沒有任何模型在五輪互動後準確率超過56%。進一步分析表明,失敗並非源於智慧體搜尋物品的能力,而是因為互動過程未能有效擴充套件使用者對自身需求的認知。智慧體往往過於依賴使用者的初始表述,而沒有主動提供教育性資訊。

這項研究對AI系統設計具有重要啟示:未來的智慧體不應僅僅被動地詢問使用者偏好,而應主動幫助使用者構建和發現偏好。透過提供領域知識、示例和對比,智慧體可以降低使用者的認知負擔,從而做出更精準的推薦。論文作者強調,真正的個性化服務需要從“挖掘偏好”轉向“構建偏好”。這一轉變對於醫療、金融等專業領域尤為重要,因為使用者往往缺乏關鍵概念知識。

展開要點與分析

文章情報

工程師進階

要點

  • 使用者通常不具備完全成形的偏好,智慧體需幫助其構建偏好
  • 基於資訊經濟學的搜尋-體驗-信任框架提出CoPref模型
  • CoShop基準測試顯示最強智慧體準確率僅56%
  • 失敗主因是互動未能有效拓展使用者對需求的理解

要點與分析由自動化流程生成,可能有誤,請結合原始來源核實。