跳到正文
原文
arXiv cs.CL· Anastasia Voznyuk, Andrey Grabovoy·· 3 小时前AI 评分48

测量机器生成文本检测器对格式伪影的依赖

Measuring Artifact Reliance in Machine-Generated Text Detectors

AI 导读

机器生成文本检测器在科学文献基准上的高分源自 PDF 提取格式伪影,仅用 27 个表层特征的逻辑回归即达 0.833-0.997 macro-F1。人类文本保留原始换行、生成文本被提取为单一文本块,这条线索加另外三个格式特征可达 0.996 AUC。不改一字重新换行机器撰写的摘要,能逆转公开检测器 20-27% 的正确判断;训练前归一化格式使泛化差距从 0.32 降至 0.22。

来源:arXiv cs.CL · arxiv.org