AGI Hunt· Nils_Reimers·· 3 小时前AI 评分36
Cohere 提出新检索评测指标 RCP-nDCG,人类一致率大增
Cohere 提出新检索评测指标 RCP-nDCG,人类一致率大增
AI 导读
Cohere 研发负责人 Nils Reimers 公布的人类研究显示,嵌入模型传统 nDCG 分数更高时,人类仅有 53% 的概率认同其搜索结果更好,接近抛硬币。团队随后用新指标 RCP-nDCG@10 优化 Cohere Embed v5,使嵌入模型更好地服务人类与 LLM,人类一致率提升至 97%。
来源:AGI Hunt · agihunt.info