跳到正文
原文
AGI Hunt· DynamicWebPaige·· 3 小时前AI 评分41

前谷歌 DevRel Paige Bailey:谁做出好 eval,谁就掌握全行业的爬坡方向

前谷歌DevRel:谁做出好eval,谁就掌握了全行业的爬坡方向

AI 导读

前谷歌 DevRel Paige Bailey 发推称,谁能发布一个大家真正在意的 eval,各实验室接下来的 hill-climb 目标就由谁决定,“拥有球门柱”本身就是巨大的 alpha。她由此点出当前 AI 行业对公开评测基准的路径依赖:基准的制定者实际上左右着全行业的能力优化方向。

来源:AGI Hunt · agihunt.info