Optimal L2 Regularization in High-dimensional Continual Linear Regression
高维连续线性回归中最优L2正则化
机构 * Department of Data and Decisions Sciences, Technion(以色列理工学院数据与决策科学系) ; School of Engineering, University of Edinburgh(爱丁堡大学工程学院) ; Department of Computer Science, Technion(以色列理工学院计算机科学系) ; Department of Electrical and Computing Engineering, Technion(以色列理工学院电气与计算机工程系) ; Meta
AI总结 本文研究了高维连续线性回归中L2正则化对泛化性能的影响,推导了在高维情况下任意线性教师下的泛化损失闭式表达式,证明最优固定正则化强度近似与任务数T成线性关系,为持续学习提供了理论基础。
Comments Accepted to ALT 2026