ProjLens: Unveiling the Role of Projectors in Multimodal Model Safety
ProjLens: 揭示项目器在多模态模型安全中的作用
机构 * University of Science and Technology of China(中国科学技术大学) ; Beijing University of Aeronautics and Astronautics(北京航空航天大学) ; Nanyang Technological University(南洋理工大学) ; Southwest Jiaotong University(西南交通大学) ; Shanghai Artificial Intelligence Laboratory(上海人工智能实验室)
AI总结 ProjLens通过分析多模态大语言模型中的后门攻击机制,揭示了项目器在安全漏洞中的关键作用,发现后门注入参数编码于低秩子空间,并通过实验验证了激活机制的差异。
Comments 18 pages ,15 figures