跳到正文
热点事件持续更新

NVIDIA发布过程化评测基准OSWorld-Pro

1 篇报道1 个报道来源7 小时前更新

先了解这件事

AI 综述

NVIDIA 发布面向计算机使用智能体的过程化评测基准 OSWorld-Pro,包含 300 余项任务、2800 余个子目标以及 67000 余条人工标注数据。与只看最终结果不同,该基准借助与人类对齐的 LLM-Judge,按顺序依赖关系评估各个子目标的完成度,并据此揭示点击类失误等过程级失败模式。报道称,Claude Opus 5 在 OSWorld 上得分 83.4%,而在 OSWorld-Pro 上仅为 75.7%。目前公开信息为 2026 年 10 月 6 日发布的该基准及这一首批评测结果,是否还有其他模型的成绩或榜单更新,尚未见报道。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月6日
  1. AGI Hunt
    NVIDIA 发布 OSWorld-Pro:2800+ 子目标过程化评测,Claude Opus 5 仅 75.7%

    NVIDIA 发布 OSWorld-Pro,以 300+ 任务、2800+ 子目标和 67,000+ 条人工标注对计算机使用智能体做过程化评测。Claude Opus 5 在 OSWorld 上达 83.4%,在 OSWorld-Pro 上仅 75.7%。该基准用与人类对齐的 LLM-Judge 评估顺序依赖子目标的完成度,并揭示点击类失误等过程级失败模式。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。