A Comparative Theoretical Analysis of Entropy Control Methods in Reinforcement Learning
强化学习中熵控制方法的比较理论分析
机构 * Shanghai Jiao Tong University(上海交通大学) ; Météo France/CNRS, Université de Toulouse, CNRM UMR 3589(法国气象局/法国国家科学研究中心,图卢兹大学,国家气象研究中心 UMR 3589)
专题命中 复杂问题求解 :reasoning(abstract);分类 cs.AI、cs.LG
AI总结 本文比较了传统熵正则化与基于协方差的熵控制方法,揭示了熵变化由log-probabilities与logit更新的协方差决定,传统方法引入持续偏差导致次优策略,而基于协方差方法通过稀疏正则化实现无偏性。
Comments 13 pages