FiRE: Enhancing MLLMs with Fine-Grained Context Learning for Complex Image Retrieval
FiRE:利用细粒度上下文学习增强多模态大语言模型(MLLMs)以实现复杂图像检索
机构 * Shandong University(山东大学) ; City University of Hong Kong(香港城市大学) ; Harbin Institute of Technology (Shenzhen)(哈尔滨工业大学(深圳)) ; Shandong Jianzhu University(山东建筑大学)
专题命中 跨模态检索 :multimodal(abstract,abstract_cn);MLLM(abstract,abstract_cn);分类 cs.CV
AI总结 本研究针对MLLMs在复杂图像检索任务中细粒度建模不足的问题,提出自动化细粒度多模态五元组数据集构建流程与两阶段微调策略,在零样本设置下于五个数据集上取得优于现有方法的性能。
Journal ref Proceedings of the ACM SIGIR Conference on Research and Development in Information Retrieval (SIGIR 2025)