AGI Hunt· moultano·· 4 小时前AI 评分48
moultano:判断模型预测准确性,看概率分布是否在 0 和 1 双峰
判断模型预测准确性:看概率分布是否在 0 和 1 双峰
AI 导读
moultano 提出一个判断模型预测准确性的实用启发式:真正准确的预测,其预测概率直方图应呈双峰分布,峰值集中在 0 和 1 附近;而在大多数话题下常见的轻微偏斜均匀分布,则说明模型置信度不足、区分度差。他指出评估预测准确性本质上是相对的,先要回答“和什么比”。
来源:AGI Hunt · agihunt.info