arXiv cs.CL· Lin Ai, Emma Thronson, Katherine Conhaim, Amir Zeldes·· 4 小时前AI 评分37
所有摘要之和:PROPALIGN 用于分级命题显著性评估
The Sum of All Summaries: PROPALIGN for Graded Proposition Salience Evaluation
AI 导读
论文提出 PROPALIGN,一种基于多重摘要的命题显著性分数估计方法,并发布配套数据集 PROPALIGNBANK,含 138K 条对齐、覆盖超 35K 个命题。在英语口语与书面语多体裁对比中,直接让模型给出判断会导致不一致,分级、基于摘要的指标更稳定;单一模型表现逊于人类,但结合语言特征的模型集成接近人工标注质量上限。
来源:arXiv cs.CL · arxiv.org