Learning, Fast and Slow: Towards LLMs That Adapt Continually
学习,快速与缓慢:迈向能够持续适应的LLM
机构 * UC Berkeley(加州大学伯克利分校) ; Mila(蒙特利尔大学人工智能研究所) ; UT Austin(得克萨斯大学奥斯汀分校) ; Eragon Periodic Labs ; Mirendil Video
AI总结 本文提出一种快速-缓慢学习框架,通过将模型参数作为缓慢权重和优化上下文作为快速权重,提升LLM在连续学习中的样本效率和性能,减少灾难性遗忘。
Comments 29 pages, 14 figures, including appendix; Blog post: https://gepa-ai.github.io/gepa/blog/2026/05/11/learning-fast-and-slow/