无有效选项MCQA中LLM弃答可靠性研究

2026年10月7日，arXiv cs.CL 发布一项研究，提出 penalty-framed no-valid-option MCQA（惩罚框架的无有效选项多选问答）设定：在 MMLU-Pro 数学子集上移除标注正确选项，允许模型从剩余选项中选择作答，或输出 ABSTAIN 表示弃答，同时对无效的强行作答加以惩罚。研究以此分析大模型在无有效选项情形下的弃答行为，发现高 MCQA 准确率不能完全保证弃答可靠性，即准确率高的模型未必能在没有正确答案时可靠地拒绝作答。这是该方向目前公开报道的最新研究进展。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。