Think at 5 Hz, Act at 20 Hz: Asynchronous Fast-Slow Vision-Language-Action Inference for Closed-Loop Driving
以5Hz思考,20Hz行动:用于闭环驾驶的异步快慢视觉-语言-动作推理
机构 * The University of Tokyo(东京大学) ; TIER IV, Inc.(TIER IV公司) ; Huawei(华为)
专题命中 仿真评测 :end-to-end driving(abstract);分类 cs.RO、cs.AI
AI总结 研究针对大语言模型用于闭环驾驶时推理延迟与车辆控制速率冲突的问题,提出快慢架构,慢系统用冻结主干处理历史,快专家基于缓存和当前帧回归航路点,经训练在CARLA上提升路线完成率,降低误差且可零样本转移。
Comments 13 pages, 5 figures, 4 tables