IsoCLIP: Decomposing CLIP Projectors for Efficient Intra-modal Alignment
IsoCLIP: 分解CLIP投影器以实现高效的模态内对齐
机构 * Media Integration and Communication Center (MICC), University of Florence, Italy(意大利佛罗伦萨大学媒体集成与通信中心) ; Department of Computer Science, Universitat Autònoma de Barcelona, Spain(西班牙巴塞罗那自治大学计算机科学系) ; Computer Vision Center, Barcelona, Spain(西班牙巴塞罗那计算机视觉中心) ; IDEAS Research Institute, Warsaw, Poland(波兰华沙IDEAS研究所)
专题命中 效率与部署 :language model(abstract);分类 cs.LG
AI总结 本文通过分析CLIP投影器的谱特性,发现模态间对齐子空间和各向异性方向,提出无训练方法IsoCLIP去除各向异性方向以改善模态内对齐,在模态内检索和分类任务上降低延迟并超越现有方法。
Comments Accepted at CVPR2026