热点事件持续更新
给 Agent 装计分板:用 30 天工具调用数查零产出
1 篇报道1 个报道来源3 小时前更新
先了解这件事
AI 综述
BkashJosi 分享了一套针对 Hermes bot 的监控方法:为每个 bot 制作一块「街机计分板」,分数取该 bot 最近 30 天的真实工具调用数,以此判断 Agent 是否真的在干活。其在 9 个 bot 上的实测呈现出几类典型情况:Ruth 一个月内被运行了 7 次,却一次工具调用都没有,属于零产出;Sanvith 完成 4,094 次工具调用,占全队 6,573 次调用中的 62%,是绝对主力;Sabiska 的调用量则从上月的 133 次悄悄降到本周的 0,出现明显衰减。这套方法的核心思路,是用工具调用这一硬指标替代运行次数等容易失真的信号,从而及早发现看似在跑、实则空转的机器人。
AI 根据报道生成 · 2 小时前更新
最新进展10月14日 03:48
BkashJosi 公开 Hermes bot 计分板方法,9 个 bot 实测揪出零工具调用的 Ruth。报道时间线
沿着报道,了解事件的不同侧面。
10月14日
- AGI Hunt给 Agent 装计分板:30 天工具调用数揪出零产出机器人
BkashJosi 分享了一套 Hermes bot 监控方法,给每个 bot 做一个「街机计分板」,分数取最近 30 天的真实工具调用数。实测 9 个 bot 中,Ruth 一个月跑了 7 次却一次工具都没调用,Sanvith 完成 4,094 次、占全队 6,573 次调用中的 62%,Sabiska 则从上月 133 次悄悄降到本周 0。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。