跳到正文
原文
arXiv cs.CL· Xiaopeng Ke, Zhixin Wang, Xuebo Liu, Xinyu Ma, Xing Zheng, Bowen Song, Weiqiang Wang, Min Zhang·· 3 小时前AI 评分36

LLM 标注者能匹配人类一致性吗:ANT-A 基准与对比知识多智能体优化

Can LLM Annotators Match Human Consistency? Benchmarking Human Agreement and Optimizing Multi-Agent with Contrastive Knowledge

AI 导读

研究提出 ANT-A Benchmark 和 ANT-OR 多智能体标注框架,用于评估 LLM 标注者与人类标注分布的一致性。

来源:arXiv cs.CL · arxiv.org