LongMem:冻结主干 + 侧网络,彻底消灭记忆过时
冻结主干LLM只训练轻量级残差侧网络,主干不变则缓存表示永不过时,支持65k Token级别长期记忆。
RL Paper Reading
8 分钟阅读冻结主干LLM只训练轻量级残差侧网络,主干不变则缓存表示永不过时,支持65k Token级别长期记忆。
借鉴卡片盒笔记法,让Agent记忆自动建立语义关联网络并动态演化。Multi-Hop F1比MemGPT提升79%,Token消耗仅其1/6。
借鉴OS虚拟内存思想,让LLM自己管理分层记忆(RAM/磁盘),通过函数调用主动存取,解决上下文窗口限制。多跳检索准确率从32%提升到92.5%。