跳到主要內容
AI News HubLIVE
更多
僅摘要

τ-knowledge:在真實世界知識上評估智慧體

現有基準無法捕捉智慧體在複雜知識庫中搜尋、推理和執行多步驟任務的挑戰。τ-knowledge填補了這一空白,透過一個包含698份文件的金融科技知識庫評估智慧體。最新結果顯示,GPT-5.5在最佳條件下僅透過37.4%的任務,表明仍有大量改進空間。

來源Hacker News AI作者: tedsanders
τ-knowledge:在真實世界知識上評估智慧體
回報錯誤

更正管道尚未開通,可先複製下方文章資訊留存。

查看更正說明

本文僅提供摘要

根據來源內容權限,本站僅提供編輯摘要、要點和原文連結。

展開要點與分析

文章情報

工程師進階

要點

  • τ-knowledge評估智慧體在真實知識庫中搜尋、推理和執行多步驟工具呼叫的能力。
  • τ-Banking知識庫包含698份文件,覆蓋21個產品類別。
  • 領先模型GPT-5.5透過率僅37.4%,較初期提升11.9個百分點,但仍遠未飽和。
  • 強模型表現出持續檢索、精準搜尋和恰當行動的特點。

要點與分析由自動化流程生成,可能有誤,請結合原始來源核實。