Cohere 提出检索评测新指标 RCP-nDCG

2026 年 10 月 3 日，Cohere 研发负责人 Nils Reimers 公布一项人类研究，指出传统 nDCG 指标与人类判断存在明显偏差：当嵌入模型的 nDCG 分数更高时，人类仅有 53% 的概率认同其搜索结果确实更好，接近抛硬币。为此团队提出新的检索评测指标 RCP-nDCG，并用 RCP-nDCG@10 对 Cohere Embed v5 进行优化，目标是让嵌入模型更好地服务人类用户与 LLM。Cohere 表示，优化后人类一致率提升至 97%。上述研究结论与优化效果均由 Cohere 方面公布，报道未提及第三方复现或其他机构的验证情况。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。