arXiv cs.CL· Feifei Qian, Xuan Chen, Lixin Cui, Chaoyang Mei, Fanlin Meng, Shuyao Xiao, Ming Cui, Junxi Yin, Lu Bai·· 3 小时前AI 评分33
从结构到有效性：ARTS-Hybrid 机制引导的 LLM 评分标准生成与精炼
From Structure to Validity: Mechanism-Guided Generation and Refinement of LLM Rubrics
AI 导读
ARTS-Hybrid 结合自适应树构建与语义优先、响应校准的精炼，在多个基准上同时提升端到端评估表现与评分标准本身的质量。机制分析显示，结构化组织可构建更全面的评分准则，仅靠语义细化不足以保证准则级判断有效，复杂分数聚合带来的额外收益有限。生成的 rubric 还能为模型优化提供有效信号，论文已投稿 ICLR 2027。
来源：arXiv cs.CL · arxiv.org