AGI Hunt· amankhan·· 2 小时前AI 评分29
amankhan 提出「每个 query 都有自己的 harness」:评测框架可按任务定制
「每个 query 都有自己的 harness」:一句话点出评测新思路
AI 导读
amankhan 提出「每个 query 都有自己的 harness」的想法:评测与 agent 执行框架可以按任务定制,而不是用一套通用框架跑所有任务。这一提法把定制粒度落到单个 query 上,被视为评测思路的一个新切入点。
来源:AGI Hunt · agihunt.info