AGI Hunt· sh_reya·· 3 小时前AI 评分60
Hamel Husain 与 sh_reya 合著《Evals for AI Engineers》出版，主张先读 trace 再定指标
Hamel 与 Shreya 出 evals 新书:先逐条读 trace 标错点,再看指标
AI 导读
sh_reya 宣布与 Hamel Husain 合著的《Evals for AI Engineers》正式出版，可在 Amazon 购买或参加签售。被引用的读者书评摘录了错误分析章节的方法论：不要从指标开始，先端到端通读 coding agent 的完整 trace，在每条 trace 第一次出错的步骤用一句话做标注，每条只做是/否判定而不打 1-5 分。
来源：AGI Hunt · agihunt.info