COLM 论文提出 PRISM 实现训练数据归因

COLM 论文提出原型语言模型 PRISM，探索训练数据归因的新路径。据报道，PRISM 的 next token 预测可在单次前向传播中直接追溯到预训练数据，而无需依赖事后分析。该工作采用「设计即归因」（training data attribution by design）的思路，认为传统事后归因方法难以满足的结构性质，可以通过改变模型的训练方式，从设计层面加以解决。报道称，这一思路为训练数据归因提供了新的范式。目前该工作尚处于论文与原型模型阶段，报道未提及更多实验细节或后续应用进展。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。