World Pilot: Steering Vision-Language-Action Models with World-Action Priors
World Pilot: 用世界动作先验引导视觉-语言-动作模型
机构 * Institute of Automation, Chinese Academy of Sciences (CASIA)(中国科学院自动化研究所) ; Nanjing University(南京大学) ; Beihang University(北京航空航天大学)
专题命中 机器人基础模型 :manipulation(abstract);world model(abstract);分类 cs.RO
AI总结 提出World Pilot框架,通过世界动作模型(WAM)的潜在引导和动作引导两条路径,为VLA模型提供场景演化先验和轨迹级运动提示,在LIBERO-Plus零样本OOD基准上达到84.7%的总成功率,并在多个真实机器人操作任务中取得最高成功率。
Comments Project Website: https://world-pilot.github.io/