Google Research 提出 sleep framework:让 LLM 在持续学习中保留知识
Google Research 提出 sleep framework,通过交替活跃交互与离线记忆巩固,使 LLM 在持续学习中不断获取新知识并避免灾难性遗忘。该框架在睡眠阶段解锁 MoE 记忆块更新权重,支持保留长达 10M tokens 的上下文知识并提升复杂推理能力。 ```
Google Research 提出 sleep framework,通过交替活跃交互与离线记忆巩固,使 LLM 在持续学习中不断获取新知识并避免灾难性遗忘。该框架在睡眠阶段解锁 MoE 记忆块更新权重,支持保留长达 10M tokens 的上下文知识并提升复杂推理能力。 ```
Microsoft Research Asia 开源了 Agent Lightning v1.0,一个约 3500 行代码的轻量级智能体强化学习框架,提出 Harnessed Agentic RL 范式,让部署时使用的真实智能体 harness 直接参与强化学习训练。
推荐理由:框架通过在模型与智能体之间插入代理层,让部署用的真实 harness 直接参与强化学习,省去了在训练框架中重写智能体的成本。