AWS Machine Learning Blog· Khaled Thabit·· 4 小时前AI 评分55
Property Finder 如何在 Amazon Bedrock 上修正评测偏差并换用更优模型
Fix evaluation bias to unlock better models on Amazon Bedrock
AI 导读
Property Finder 发现评测集中 96.8% 的标签直接来自现有视觉语言模型的预测而非人工核验,导致替代模型在比较开始前就处于劣势。团队改用领域专家独立标注的 356 张 UAE 房源图重建基准,并按属性改为多标签评测,再逐个模型迭代提示词。
来源:AWS Machine Learning Blog · aws.amazon.com