跳到正文
原文
arXiv cs.CL· Yufan Zhu, Yangfan Jiang, Yang Fei, Shizheng Hou, Shubhankar Mohapatra, Xiaokui Xiao·· 3 小时前AI 评分37

QuasiLeak-Bench:评估基于 LLM 的隐私检测器在策略条件下的准证据组恢复

QuasiLeak-Bench: Evaluating LLM-Based Privacy Detectors on Policy-Conditioned Quasi-Evidence Group Recovery

AI 导读

QuasiLeak-Bench 是评估策略条件下准证据组恢复的隐私基准,检验检测器能否恢复完整准证据组并标记策略禁止的披露。反向构建流水线先从弱准标识符组成经验证可联合揭示目标属性的证据组,再生成文档并自动质控。现有隐私检测器迁移效果差,本地可部署 LLM 检测器远落后于专有模型,主因是漏掉多数准证据组;4B 模型微调后在留出文档上超过最强提示模型。

来源:arXiv cs.CL · arxiv.org