跳到正文
原文
AGI Hunt· shaun117·· 4 小时前AI 评分31

Jev 1.14.0 整体校准良好,但难题过度自信 22 个百分点

Jev 1.14.0整体校准良好但难题过度自信22点

AI 导读

Jev 1.14.0 在 500 道二元判断题上整体校准良好,ECE 仅 0.023,但难题上过度自信 22 个百分点。简单题上信心偏低约 7 个百分点,中等题基本准确。整体指标掩盖了难度维度的校准缺陷。

来源:AGI Hunt · agihunt.info