跳到正文
热点事件持续更新

给 Agent 装计分板:用 30 天工具调用数查零产出

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

BkashJosi 分享了一套针对 Hermes bot 的监控方法:为每个 bot 制作一块「街机计分板」,分数取该 bot 最近 30 天的真实工具调用数,以此判断 Agent 是否真的在干活。其在 9 个 bot 上的实测呈现出几类典型情况:Ruth 一个月内被运行了 7 次,却一次工具调用都没有,属于零产出;Sanvith 完成 4,094 次工具调用,占全队 6,573 次调用中的 62%,是绝对主力;Sabiska 的调用量则从上月的 133 次悄悄降到本周的 0,出现明显衰减。这套方法的核心思路,是用工具调用这一硬指标替代运行次数等容易失真的信号,从而及早发现看似在跑、实则空转的机器人。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月14日
  1. AGI Hunt
    给 Agent 装计分板:30 天工具调用数揪出零产出机器人

    BkashJosi 分享了一套 Hermes bot 监控方法,给每个 bot 做一个「街机计分板」,分数取最近 30 天的真实工具调用数。实测 9 个 bot 中,Ruth 一个月跑了 7 次却一次工具都没调用,Sanvith 完成 4,094 次、占全队 6,573 次调用中的 62%,Sabiska 则从上月 133 次悄悄降到本周 0。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。