跳到主要內容
AI News HubLIVE
更多
僅摘要

微軟研究人員發現AI模型和智慧體無法處理長時間執行的任務

微軟研究人員進行的一項新研究表明,當前的大語言模型(LLM)在執行多步驟工作流時會產生嚴重錯誤,即使是前沿模型在20次互動中平均丟失25%的文件內容。研究提出了DELEGATE-52基準測試,覆蓋52個專業領域,發現只有Python程式設計領域達到“就緒”閾值。使用工具以智慧體方式執行模型反而導致效能更差。

來源Hacker News AI作者: beardyw
微軟研究人員發現AI模型和智慧體無法處理長時間執行的任務
回報錯誤

更正管道尚未開通,可先複製下方文章資訊留存。

查看更正說明

本文僅提供摘要

根據來源內容權限,本站僅提供編輯摘要、要點和原文連結。

展開要點與分析

文章情報

工程師進階

要點

  • LLM在執行長期任務時會顯著損壞文件,平均內容丟失達50%。
  • DELEGATE-52基準測試中,僅有Python程式設計領域達到98%的“就緒”標準。
  • 智慧體工具未能改善效能,反而帶來額外6%的退化。
  • 災難性損壞(評分≤80%)出現在超過80%的模型/領域組合中。

要點與分析由自動化流程生成,可能有誤,請結合原始來源核實。