COLM 将展示 softmax 梯度瓶颈论文

据 AGI Hunt 2026 年 10 月 6 日报道，研究者 Nathan 将在 COLM 会议上展示一篇关于 softmax 梯度瓶颈的论文，报告时间为周四 16:40。Yoav Artzi 在转发推荐时补充称，Nathan 曾用一种新的 LM head 短暂保持 nanogpt speedrun 纪录，维持时间只有数小时，具体细节可到现场交流。截至目前，公开信息仅为此条报告预告，论文的具体方法、实验设置与结论尚未披露，也未见此前有过关于该论文的其他报道。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。