跳到正文
热点事件持续更新

COFFEQA 反事实引导少样本蒸馏方法

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

2026 年 10 月 12 日,arXiv cs.CL 刊出工作 COFFEQA,提出反事实引导的少样本蒸馏策略,用于大语言模型的开卷问答蒸馏。该方法构造「事实—反事实」上下文对,并以 CFD 指标对这些对进行验证,从而在事实样本之外为蒸馏提供额外监督信号。作者称在 T5 与 Qwen2.5 两个模型家族、5 个域内和 3 个域外问答基准上,该策略优于仅用事实样本的蒸馏基线;在 TriviaQA 上使用 32 个少样本对时,平均 EM 提升 8.77、F1 提升 9.98。目前仅有这一篇报道,暂无后续复现、质疑或其他进展。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月12日
  1. arXiv cs.CL
    COFFEQA:面向 LLM 问答的反事实引导少样本蒸馏

    COFFEQA 提出反事实引导的少样本蒸馏策略,用经 CFD 指标验证的「事实—反事实」上下文对,为 LLM 开卷问答蒸馏提供额外监督。在 T5 与 Qwen2.5 家族、5 个域内和 3 个域外问答基准上,它优于仅用事实样本的蒸馏基线;TriviaQA 上 32 个少样本对时平均 EM 提升 8.77、F1 提升 9.98。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。