Multimodality as Supervision: Self-Supervised Specialization to the Test Environment via Multimodality
多模态作为监督:通过多模态进行自监督的测试环境特化
机构 * Swiss Federal Institute of Technology Lausanne (EPFL)(瑞士洛桑联邦理工学院)
AI总结 研究利用跨模态学习机制,提出在特定测试环境下的受限设置并开发TST方法,通过在测试环境收集多模态数据自监督预训练模型,评估其在下游任务的表现,发现可减少对外部大规模数据集预训练的依赖。
Comments Project page: https://tst-vision.epfl.ch/