热点事件持续更新
研究:transcoder电路分析增益有限
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
2026年10月27日,AGI Hunt 报道了一项可解释性研究。该研究认为,直接用神经元做电路分析可能已经足够,transcoder 带来的额外增益很小。在 Gemma 3 4B 的 1500 个 bigram 探测任务中,transcoder 取得 top-1 的比例为 75.6%,稀疏化神经元为 0.0%,MoE 路由专家神经元为 0.9%。研究还包含 Llama 3.1 8B 的加法电路可视化,并扩展到 MoE transcoder 与 SAE。
AI 根据报道生成 · 1 小时前更新
报道时间线
沿着报道,了解事件的不同侧面。
10月27日
- AGI Hunt可解释性研究:神经元本身足以做电路分析,transcoder 增益有限
可解释性研究发现,直接用神经元做电路分析可能已足够,transcoder 带来的额外增益很小。在 Gemma 3 4B 的 1500 个 bigram 探测任务中,transcoder 取得 top-1 的比例为 75.6%,稀疏化神经元 0.0%、MoE 路由专家神经元 0.9%。研究还包含 Llama 3.1 8B 加法电路可视化,并扩展到 MoE transcoder 与 SAE。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。