AGI Hunt· prajdabre·· 2 小时前AI 评分46
NICT 团队 OptiMer 获 EMNLP2026 杰出论文奖,搜索成本降 15-35 倍
NICT 团队 OptiMer 获 EMNLP2026 杰出论文奖,搜索成本降 15-35 倍
AI 导读
NICT 研究团队的 OptiMer 论文获 EMNLP2026 杰出论文奖,在 Gemma 3 27B 的持续预训练实验中,其分布向量合并方法将搜索成本降低 15-35 倍。该方法为每个数据集单独训练 CPT 模型并提取分布向量,再用贝叶斯优化事后搜索组合权重,把数据配比选择与训练解耦。
来源:AGI Hunt · agihunt.info