跳到正文
原文
arXiv cs.CL· Shuyuan Zheng, Yun-seo Lee, Xing Gao, Jialu Wu, Jiabao Hu, Katrina Qiyao Wang, Xinbo Lin, Qianying Liu, Chuan Xiao, Tao Huang·· 4 小时前AI 评分34

LLM 如何理解法律哲学?诊断 LLM 的法律哲学推理能力

How Do LLMs Understand Legal Philosophy? Diagnosing Legal-Philosophical Reasoning in LLMs

AI 导读

研究者提出 LePhilBench,用于评估 LLM 的法律哲学推理能力,包含两项任务与一个数据集。其测试集包含 220 份美国最高法院判决意见,由法学教授设计 14 个法律哲学标注问题,3 名受过法学训练的标注者逐份作答,共得到 9,240 个法律哲学标签。研究称现有工作基本未考察 LLM 能否理解法律哲学并据此推理。

来源:arXiv cs.CL · arxiv.org