arXiv cs.CL· Arzu Burcu G\"uven, Anna Rogers, Leonie Weissweiler, Joakim Nivre, Rob van der Goot·· 3 小时前AI 评分36
BLiMPPI：覆盖 33 种语言的极性项最小对评测基准
BLiMPPI: Benchmark of Linguistic Minimal Pairs for Polarity Items
AI 导读
BLiMPPI 是覆盖 33 种语言、逾 12,000 组极性项（NPI）最小对的多语言评测套件。其数据由 Universal Dependencies 树库中发现的 NPI 经允准环境标注与扰动生成，评测了 12 个多语言模型、2 个单语言模型及 n-gram 基线，结果显示多语言模型在低资源语言和非 n-gram 可解的样本对上表现最差。
来源：arXiv cs.CL · arxiv.org