Aligning with Your Own Voice: Self-Corrected Preference Learning for Hallucination Mitigation in LVLMs
以自身声音对齐:用于减轻大型视觉-语言模型幻觉的自我纠正偏好学习
机构 * Graduate School of Advanced Imaging Sciences, Multimedia and Film(高级影像科学研究生院,多媒体与电影系) ; Department of Artificial Intelligence(人工智能系)
专题命中 幻觉与鲁棒性 :vision-language model(abstract);分类 cs.AI
AI总结 本文提出AVES-DPO框架,通过内在知识生成分布数据,利用共识验证机制诊断幻觉并引导模型自我纠正,有效缓解LVLMs的幻觉问题,仅需5200样本即优于现有基线。
Comments Accepted to ACL 2026