AGI Hunt· rhythmrg·· 3 小时前AI 评分53
Applied Compute 用决策式评分器替代 LLM judge，成本降约 32 倍、一致率 94%
决策式评分器替代 LLM Judge,便宜32倍快8倍,一致率94%
AI 导读
Applied Compute 在 AC2 的代码 QA benchmark 上把 RL 与评测管线中的 LLM judge 换成决策式评分器，一次调用同时为所有 rubric 标准给出 yes/no 概率。
来源：AGI Hunt · agihunt.info