What Training Data Teaches RL Memory Agents: An Empirical Study of Curriculum Effects in Memory-Augmented QA
训练数据教会RL记忆体代理什么:记忆增强问答中课程效应的实证研究
机构 * Columbia University(哥伦比亚大学) ; Independent Researcher(独立研究者) ; Johns Hopkins University(约翰霍普金斯大学) ; Northeastern University(东北大学)
AI总结 通过控制实验,研究训练课程(领域内、混合、领域外)对强化学习记忆体代理在记忆增强问答中的技能获取和专业化影响,发现课程组成作为专业化的细粒度杠杆,混合课程在整体F1上最优,而窄领域外课程可转移特定技能(如时间推理),并报告了将GRPO适配到单GPU环境的实用经验。
Comments 14 pages, 2 figures, 11 tables. Code, checkpoints, and evaluation artifacts available at https://github.com/EvaxHe/rl-memory-curriculum