跳到正文
原文
AGI Hunt· moultano·· 4 小时前AI 评分48

moultano:判断模型预测准确性,看概率分布是否在 0 和 1 双峰

判断模型预测准确性:看概率分布是否在 0 和 1 双峰

AI 导读

moultano 提出一个判断模型预测准确性的实用启发式:真正准确的预测,其预测概率直方图应呈双峰分布,峰值集中在 0 和 1 附近;而在大多数话题下常见的轻微偏斜均匀分布,则说明模型置信度不足、区分度差。他指出评估预测准确性本质上是相对的,先要回答“和什么比”。

来源:AGI Hunt · agihunt.info