跳到正文
原文
AGI Hunt· pardhu--·· 3 小时前AI 评分35

Google Titans 推理时自学新知,学错了怎么删?作者实验揭示召回难复原

Titans 推理时自学新知,但学错了怎么删?作者实验揭示召回难复原

AI 导读

Reddit 用户对 Google Titans 架构做了视觉化讲解与小型合成实验,发现纠正错误输入后模型召回有所改善,但无法完全恢复到未受污染状态。Titans 将参数固定的注意力与把早期信息压缩进可变权重、在使用中持续学习的神经记忆结合。作者由此提出开放问题:应允许 AI 自动记住什么,又该如何撤销一次记忆错误。

来源:AGI Hunt · agihunt.info