跳到正文
原文
AGI Hunt· CFGeek·· 3 小时前AI 评分32

Christos Tzamos 团队提出 2D 格点循环单元:新型神经记忆架构以 3×3 局部读写存取记忆

2D 格点循环单元:新型神经记忆架构以 3×3 局部读写存取记忆

AI 导读

Christos Tzamos 团队发布一种新型神经记忆架构,将记忆建模为无界的二维循环单元格点,网络学习把每个 key/query 映射到格点上的位置,写入与读取仅通过该位置周围极小的 3×3「凸包」区域进行,以局部读写实现大规模记忆存取。转发者评价该设计「非常聪明」,并指出记忆机制是当前 LLM 长上下文与 agent 持久化的核心瓶颈之一。

来源:AGI Hunt · agihunt.info