跳到正文
原文
AGI Hunt· Nils_Reimers·· 3 小时前AI 评分36

Cohere 提出新检索评测指标 RCP-nDCG,人类一致率大增

Cohere 提出新检索评测指标 RCP-nDCG,人类一致率大增

AI 导读

Cohere 研发负责人 Nils Reimers 公布的人类研究显示,嵌入模型传统 nDCG 分数更高时,人类仅有 53% 的概率认同其搜索结果更好,接近抛硬币。团队随后用新指标 RCP-nDCG@10 优化 Cohere Embed v5,使嵌入模型更好地服务人类与 LLM,人类一致率提升至 97%。

来源:AGI Hunt · agihunt.info