AGI Hunt· JoshPurtell·· 3 小时前AI 评分31
开发者 Josh Purtell 盘点真正改变 LLM 的软件侧 S 曲线:MoE、CoT RLVR、次二次注意力与 Looping 架构
从业者盘点真正改变 LLM 的软件侧 S 曲线:MoE、CoT RLVR 等
AI 导读
开发者 Josh Purtell 点名四项真正改变 LLM 可用性的软件侧 S 曲线:MoE、次二次复杂度注意力、思维链 RLVR 和循环/Looping 架构。他认为硬件性能增长让许多模型能力曲线其实来自硬件红利,缺少这些软件突破,即便换新 GPU 模型也无法实用。他并追问还有多少这样的软件侧 S 曲线尚未被发现。
来源:AGI Hunt · agihunt.info