AGI Hunt· DevinAI·· 3 小时前AI 评分42
Cognition 发布 FrontierCode 2.0:用模糊需求考 AI 的工程判断力
AI 导读
Cognition(Devin 背后团队)成员与研究团队合作推出编码基准 FrontierCode 2.0,用刻意保留模糊性的「欠明确提示」考察模型的工程判断力。该基准不问模型能否按规格写代码,而是问「这个 PR 你真的会合并吗」,2.0 进一步追问「你该不该合并」。相比上一版,2.0 任务更多样、范围更大,对可合并性(mergeability)的标准也更高。
来源:AGI Hunt · agihunt.info