YARD: Y-Architecture Register Decoding for Efficient Hallucination Mitigation in Large Vision-Language Models
YARD: Y型架构寄存器解码用于大型视觉语言模型中的高效幻觉缓解
机构 * Guangdong University of Technology(广东工业大学) ; Nanyang Technological University(南洋理工大学) ; Shenzhen TENCLASS Technology Co., Ltd.(深圳TENCLASS科技有限公司)
AI总结 提出YARD框架,通过Y型架构共享浅层计算并在中间层分支,用寄存器令牌替换视觉令牌构建退化分支,实现无需训练的对比解码,有效缓解幻觉并降低推理延迟。
Comments 21 pages, 11 figures