跳到正文
热点事件持续更新

模拟实验量化编码代理完成任务中的多余工作

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

2026年10月13日,Towards Data Science 报道一项模拟实验,用于量化 AI 编程智能体完成任务时产生的多余工作量。实验进行约 5 万次模拟运行,智能体决策由带随机种子的 Python 策略模拟,并未运行 Claude Code 或 Codex,但所用仓库与测试均为真实。结果显示,智能体即便通过测试,最终补丁也可能包含大量无用改动:某案例改了 3 个文件共 8 行,而参考修复只需 2 行。报道据此指出,仅看 SWE-bench 通过率无法反映智能体在得到最终补丁之前多消耗的轮次与 token。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月13日
  1. Towards Data Science
    AI 编程智能体虽能解决任务,但浪费了多少工作量?

    约 5 万次模拟运行的实验显示,AI 编程智能体即便通过测试,最终补丁也可能含大量无用改动:某案例改了 3 个文件共 8 行,而参考修复只需 2 行。实验未运行 Claude Code 或 Codex,智能体决策由 seeded Python 策略模拟,仓库与测试均为真实。仅看 SWE-bench 通过率无法反映智能体到最终补丁前多耗的轮次与 token。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。