跳到正文
热点事件持续更新

DMAIC-Bench:智能体自我约束能力基准

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

2026年10月26日,arXiv cs.AI 发布 DMAIC-Bench,用于评估 LLM 智能体在多阶段分析任务中的自我约束能力,包含 97 个种子任务和 15 个工业案例。研究测试了来自 6 家提供商的 13 个模型:在匹配 GO 决策上的执行级路由准确率平均为 92%,而 NO-GO 决策仅 19%。在对 11 个被审计智能体进行盲审后,研究估计:在已到达 NO-GO 决策的情形中,有 47% 的报告仍依据无效证据行动,区间为 31% 至 61%。目前该基准为首次发布,报道中未见后续进展。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月26日
  1. arXiv cs.AI
    DMAIC-Bench:多阶段分析任务中智能体从自我反思到自我约束的基准

    DMAIC-Bench 用 97 个种子任务和 15 个工业案例,评估 LLM 智能体在多阶段分析任务中的自我约束能力。来自 6 家提供商的 13 个模型在匹配 GO 决策上的执行级路由准确率平均为 92%,NO-GO 决策仅 19%。盲审 11 个被审计智能体后估计,报告在已到达 NO-GO 决策中有 47% 依据无效证据行动,区间为 31% 至 61%。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。