Think Before You Drive: World Model-Inspired Multimodal Grounding for Autonomous Vehicles
在驾驶前思考:基于世界模型的多模态接地用于自动驾驶车辆
机构 * University of Macau(澳门大学) ; UESTC(电子科技大学) ; Purdue University(普渡大学) ; McGill University(麦吉尔大学) ; Massachusetts Institute of Technology(麻省理工学院) ; University of Washington(华盛顿大学) ; The Hong Kong University of Science and Technology(香港科学与技术大学)
专题命中 视觉空间推理 :CoT(abstract,abstract_cn);reasoning(abstract);chain-of-thought(abstract);分类 cs.AI
AI总结 本文提出ThinkDeeper框架,通过预测未来空间状态提升自动驾驶车辆的自然语言指令理解能力,结合超图引导解码器融合多模态输入,提出DrivePilot数据集并在多个基准测试中表现优异。