Cat-DPO: Category-Adaptive Safety Alignment
Cat-DPO:基于类别的安全对齐
机构 * University of Southern California(南加州大学) ; Northwestern University(西北大学)
AI总结 Cat-DPO通过将安全对齐转化为类别约束优化问题,为每个有害类别设置独立的适应性安全边际,提升整体帮助性和无害性,减少类别间的安全方差和最佳至最差差距。
Comments 23 pages, 6 figures