SHAPO: Sharpness-Aware Policy Optimization for Safe Exploration
SHAPO: 面向安全探索的锐度感知策略优化
机构 * Université de Montréal(蒙特利尔大学) ; Mila - Québec AI Institute(蒙特利尔人工智能研究所) ; Université Laval(拉瓦尔大学) ; IID - Institut Intelligence et Données(智能与数据研究所) ; LawZero ; CIFAR AI Chair(CIFAR人工智能主席)
AI总结 提出SHAPO算法,通过锐度感知策略更新隐式重加权梯度,放大罕见不安全动作的影响,抑制安全动作的贡献,从而在欠探索区域实现保守行为,提升安全性与任务性能。
Comments ICLR 2026