跳到正文
原文
AGI Hunt· RexDouglass·· 2 小时前AI 评分33

「分叉记忆」新机制:按世界分页存储,旧页不被新数据覆盖

AI 导读

iarthsingh 分享了一种针对持续学习「世界切换」问题的「分叉记忆」机制,每个「世界」保留一页独立记忆。当连续多个 batch 看起来不熟悉时就新开一页,只有当前页在学习更新,旧页不被新数据覆盖,从而避免不同环境的数据互相干扰。作者展示了系统自动发现的 20 个记忆页(未重排),可直观看到模型对环境的切分结果。

来源:AGI Hunt · agihunt.info