AGI Hunt· dejavucoder·· 4 小时前AI 评分29
预训练 LLM 是 bouba、RL 后训练是 kiki:AI 圈新梗点破两种训练
预训练是 bouba,RL 后训练是 kiki,AI 圈新梗一句话点破两种训练
AI 导读
AI 圈流传一句话梗:预训练 LLM 是 bouba,RL 后训练 LLM 是 kiki,借心理学经典的 bouba/kiki 联觉效应类比两类训练。该说法称预训练产出的是「圆滑流畅」的语言,RL 后训练则塑造出另一种「尖锐」的形态。
来源:AGI Hunt · agihunt.info