CAIRN: Cross-Room 3D Scene Understanding with Topology-Aware Large Multimodal Models
CAIRN:使用拓扑感知大型多模态模型进行跨房间3D场景理解
机构 * University of Oxford(牛津大学) ; Microsoft(微软公司) ; Simon Fraser University(西蒙弗雷泽大学)
AI总结 研究针对现有3D-LLMs不能处理多房间场景问题,提出拓扑感知3D-LLM即CAIRN。其将Transformer注意力与场景层次对齐,通过多种方式增强模型能力。在新基准CAIRN-MR上实验,CAIRN在多房间任务中大幅超越前人,单房间任务也具竞争力。
Comments Project Page: https://oceansdepp.github.io/cairn_web/