DeepSWE:基于原创、长期工程任务的编码智能体评测
DeepSWE是一个新的基准测试,用于评估AI编码智能体在全新、复杂的软件工程任务上的表现。它避免了数据污染,覆盖了多样化的代码库,需要大量代码修改,并使用手工编写的验证器。领先模型表现差异显著,GPT-5.5以70%的准确率位居榜首。
DeepSWE:基于原创、长期工程任务的编码智能体评测
本文仅提供摘要
根据来源内容权限,本站仅提供编辑摘要、要点和原文链接。
DeepSWE是一个新的基准测试,用于评估AI编码智能体在全新、复杂的软件工程任务上的表现。它避免了数据污染,覆盖了多样化的代码库,需要大量代码修改,并使用手工编写的验证器。领先模型表现差异显著,GPT-5.5以70%的准确率位居榜首。
根据来源内容权限,本站仅提供编辑摘要、要点和原文链接。