Look Twice: Training-Free Evidence Highlighting for Knowledge-based Visual Question Answering
二次审视:多模态大语言模型中的免训练证据高亮
机构 * University of Modena and Reggio Emilia(摩德纳和雷焦艾米利亚大学)
专题命中 视觉问答 :visual question answering(title,abstract);multimodal large language model(abstract);分类 cs.CV、cs.AI
AI总结 本文提出Look Twice框架,通过模型注意力模式识别相关视觉区域和文本证据,提升预训练MLLMs在多模态证据利用中的表现,实验显示在多个VQA基准上效果显著。
Comments Project Page: https://aimagelab.github.io/LoT/