Adaptive Residual-Update Steering for Low-Overhead Hallucination Mitigation in Large Vision Language Models
自适应残差更新引导用于大型视觉语言模型中低开销幻觉抑制
发表机构 * Aalto University, Espoo, Finland(艾尔沃大学,芬兰 Espoo) ; Shenzhen Institutes of Advanced Technology, Chinese Academy of Sciences, Shenzhen, China(深圳先进技术研究院,中国科学院,深圳)
AI总结 本文提出RUDDER框架,通过创建持久视觉锚点来对抗视觉稀释,利用模型的prefill残差更新提取鲁棒证据方向,并通过自适应门控机制注入解码过程,有效抑制幻觉并保持高吞吐量。
Comments Accepted by ICML 2026; Code available at: https://github.com/Akko000/RUDDER-Residual-Update-Directed-DEcoding-Regulation-