跳到正文
原文
arXiv cs.CL· Matthew J. Vowels, Jamie Cummins·· 4 小时前AI 评分42

Kurate:可扩展的科学论文质量分析系统

Kurate: Scalable Scientific Quality Analysis

AI 导读

Kurate 用 LLM 评估已发表研究的质量,结合论文及其试验注册、方案等相关文档,并把每个判断链接到依据的原文段落。该系统对 4,347 篇论文(其中 3,913 篇报告随机试验)按 8 个研究设计与报告维度打分。在 60 份留出临床试验文档上,Kurate 提取信息与专家标注在 221/242 个方案评分点和 294/370 个结果发表评分点上一致,AC1 分别为 0.94 和 0.81。

来源:arXiv cs.CL · arxiv.org