One Model, Many Graphs: Learning over Attributed Graphs across Heterogeneous Modalities with Vision-Language Models
一个模型,多种图:使用视觉语言模型在异构模态的属性图上进行学习
机构 * New York University Shanghai(纽约大学上海分校) ; New York University(纽约大学)
AI总结 研究利用视觉语言模型解决属性图模态异质性问题,提出OMG-VLM框架,以预训练VLM为共享主干,引入结构感知图适配器,在节点分类和链接预测等任务中表现出色,优于现有基线且泛化能力强。