MiMIC: Mitigating Visual Modality Collapse in Universal Multimodal Retrieval While Avoiding Semantic Misalignment
MiMIC: 缓解通用多模态检索中的视觉模态崩溃并避免语义错位
机构 * State Key Laboratory for Novel Software Technology(新型软件技术国家重点实验室) ; School of Artificial Intelligence(人工智能学院)
专题命中 跨模态检索 :multimodal(title,abstract);multi-modal(abstract);分类 cs.CV、cs.AI
AI总结 MiMIC通过融合-解码器架构和鲁棒训练方法,解决通用多模态检索中视觉模态崩溃和语义错位问题,在WebQA+和EVQA+数据集上优于早融合和晚融合基线。