SWEET: Sparse World Modeling with Image Editing for Embodied Task Execution
SWEET:基于图像编辑的稀疏世界建模用于具身任务执行
机构 * Show Lab, National University of Singapore(新加坡国立大学Show实验室) ; Central South University(中南大学)
专题命中 图像编辑 :image editing(title,abstract);diffusion(abstract);分类 cs.CV
AI总结 本文研究图像编辑模型能否作为稀疏视觉世界模型用于机器人操作,通过预测任务级未来状态而非密集视频生成,提出SWEET框架实现稀疏视觉规划,结合语言指令和空间引导生成关键帧,并通过扩散动作预测器生成可执行动作,实验表明其在不同场景中提升关键帧预测能力。