跳到主要內容
AI News HubLIVE
站內改寫1 分鐘閱讀

研究稱AI建議讓人的準確性降低3倍,但自信度提高2倍

文章摘要

法國和義大利大學的研究表明,獲得AI建議後,人們說“我不知道”的意願從44%降到3%,準確性從27%降到9%,而自信度從30%升到76%。即使AI給出錯誤答案,人們也會信任。

來源Hacker News AI作者: rbanffy
研究稱AI建議讓人的準確性降低3倍,但自信度提高2倍
回報錯誤

更正管道尚未開通,可先複製下方文章資訊留存。

查看更正說明
直接讀正文

一項由法國和義大利三所大學共同進行的研究發現,AI建議顯著抑制了人們的判斷力。在獲取AI建議後,參與者願意承認“我不知道”的比例從44%暴跌至3%,準確率從27%降至9%,而自信度卻從30%飆升至76%。研究人員表示:“人們變得更差,準確率只有原來的三分之一,但自信度卻翻了一倍。”

該研究由米蘭比可卡大學副教授Valerio Capraro、巴黎高等師範學院的Chiara Marcoccia和羅馬大學的Walter Quattrociocchi共同完成。研究刻意選擇了AI模型通常會出錯的問題,例如電影《像貝克漢姆一樣踢球》中球隊隊服的顏色。他們使用的是Step 3.5 Flash模型,該模型在回答這些問題時通常出錯,這樣任何判斷力的下降都不能被解釋為對可靠工具的合理依賴。一些原本能答對的參與者在諮詢AI後反而答錯。

金錢激勵有一定幫助,但效果有限。參與者承認無知的意願從3%升至8%,準確率從9%升至16%,但仍遠低於無AI時的基線(分別為44%和27%)。今年早些時候,沃頓商學院的研究人員創造了“認知投降”一詞來描述類似現象:人們80%的情況下接受錯誤的AI答案,同時報告比沒有AI時更高的自信度。這項新研究提供了更尖銳的資料:不僅是人們信任錯誤的AI答案,而是AI的存在本身就抑制了認知上承認自己不知道的習慣。

“對人類來說,說‘我不知道’的能力非常重要,因為它代表了對自身知識侷限的認識,”Capraro說。他尤其擔心兒童,他們在發展出批判性思維能力之前就開始接觸這些系統。谷歌的AI搜尋改革用自信的AI生成摘要取代了連結,而Common Sense Media本週稱這種設計對學生來說是“不可接受的風險”。這一模式是一致的:AI產品被設計為回答,從不承認“不知道”,而使用它們的人類也在學會同樣的事情。

展開要點與分析

文章情報

工程師進階

要點

  • AI建議使人們說“不知道”的意願從44%驟降至3%,準確性從27%降至9%,自信度從30%升至76%。
  • 研究使用AI常答錯的問題(如電影細節),以排除合理依賴。
  • 金錢激勵僅輕微改善表現,但遠低於無AI時的基線。
  • 專家警告AI可能削弱批判性思維,尤其對兒童。

要點與分析由自動化流程生成,可能有誤,請結合原始來源核實。