Analysis-by-Proxy: Localization Signals in VLMs Operating as Condition Encoders
代理分析:作为条件编码器的视觉语言模型中的定位信号
机构 * Tel Aviv University, Tel Aviv, Israel(特拉维夫大学) ; Google DeepMind(谷歌DeepMind)
专题命中 可控生成 :diffusion(abstract);image editing(abstract);分类 cs.CV
AI总结 研究视觉语言模型(VLMs)作条件编码器时编辑管道定位性能差的问题,引入代理分析框架,通过训练代理模型分析VLM中间表示来揭示编码定位信息的表示,发现现有条件提取策略缺陷,为条件架构设计提供新思路。
Comments Accepted as a Spotlight at the ICML 2026 Mechanistic Interpretability Workshop