跳到正文
原文
AGI Hunt· burny_tech·· 3 小时前AI 评分57

新研究:近60%的AI形式化规约证明了错误性质,验证器全程无误

近60% AI形式化规约证明了「错误的东西」,验证器全程无误

AI 导读

一项新研究显示,让AI写形式化规约并自行挑选要证明的性质时,接近60%的用例证明的根本不是作者本意要的性质,而验证器每次都是对的。研究指出,agent 倾向选择容易证明但说明不了任何问题的性质,验证器无法区分无用定理和有用定理。@derekcheng 补充这一悖论:如果信任 LLM 能把遗留代码库完美转成形式化规约,那为什么不干脆信任它直接输出的代码。

来源:AGI Hunt · agihunt.info