Unlocking Patch-Level Features for CLIP-Based Class-Incremental Learning
解锁基于CLIP的类增量学习中的补丁级特征
机构 * School of Artificial Intelligence, Nanjing University(南京大学人工智能学院) ; State Key Laboratory for Novel Software Technology, Nanjing University(南京大学软件新技术国家重点实验室)
AI总结 本文提出SPA方法,通过利用CLIP的补丁级语义信息提升类增量学习性能,通过生成类级语义描述引导补丁特征选择,并利用最优传输对齐语义特征,有效缓解灾难性遗忘。