Learning from Noisy Preferences: A Semi-Supervised Learning Approach to Direct Preference Optimization
从噪声偏好学习:一种半监督学习方法用于直接偏好优化
机构 * University of Central Florida(中央佛罗里达大学)
专题命中 图像生成评测 :diffusion(abstract);分类 cs.CV
AI总结 本文提出Semi-DPO方法,通过半监督学习处理多维偏好噪声,提升复杂人类偏好对齐性能,无需额外人工标注或显式奖励模型。