热点事件持续更新
研究者警示 User Sim Index 评测可被刷至约95%
1 篇报道1 个报道来源9 小时前更新
先了解这件事
AI 综述
2026年10月6日,AGI Hunt 报道,研究者 ericzelikman 公开警示:业内常用的用户模拟器评测 User Sim Index(USI)并不靠谱,不应继续使用。他同时给出代码实现,构造了一个硬编码的「用户模型」,仅采用固定答案等平凡策略,就在沟通、信息量、澄清追问、错误反应四个行为维度取得约 95% 的高分。研究者据此认为,该评测无法有效区分模型的真实能力,高分未必对应真实对话水平。报道未提及评测方或其他机构对此的回应。
AI 根据报道生成 · 3 小时前更新
最新进展10月6日 08:31
研究者 ericzelikman 公开指出 USI 评测不可靠,硬编码用户模型即可刷到约95%。报道时间线
沿着报道,了解事件的不同侧面。
10月6日
- AGI Hunt研究者警示:User Sim Index 评测可被脚本刷至 95%
研究者 ericzelikman 指出,业内常用的用户模拟器评测 User Sim Index(USI)并不靠谱,不应继续使用。他附带代码实现了一个硬编码「用户模型」,仅靠固定答案等平凡策略,就能在沟通、信息量、澄清追问、错误反应四个行为维度拿到约 95% 高分,说明该评测无法有效区分真实能力。
本事件热度走势
当前热度 8·可比范围峰值 8(10月6日 15:00)·近 24 小时可比范围变化 –
趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。