Point Cloud Models Improve Visual Robustness in Robotic Learners
专题命中 具身推理 :robotic(title,abstract);world model(abstract);分类 cs.RO、cs.CV、cs.LG;robotics(comments)
Comments Accepted at International Conference on Robotics and Automation, 2024
视觉与机器人
机器人、具身智能、机器人学习、操作、导航和具身世界模型。
专题命中 具身推理 :robotic(title,abstract);world model(abstract);分类 cs.RO、cs.CV、cs.LG;robotics(comments)
Comments Accepted at International Conference on Robotics and Automation, 2024
ContactGuard:基于动作条件潜世界模型的接触前执行监控器
机构 * College of Connected Computing, Vanderbilt University(范德堡大学连接计算学院) ; School of Computer Science, The University of Sydney(悉尼大学计算机学院) ; Australian Centre for Robotics, The University of Sydney(悉尼大学澳大利亚机器人中心)
专题命中 具身推理 :world model(title,abstract);manipulation(abstract);分类 cs.RO、cs.AI、cs.CV
AI总结 ContactGuard是基于动作条件潜世界模型的接触前执行监控器,通过预测接触前动作的潜态后果判断是否失败,能准确预测接触型操纵任务失败,可迁移至真实机器人且无需修改底层策略。
Comments 14 pages, 5 figures, 8 tables
提升具身世界模型用于规划与控制
机构 * Computer Science, New York University(纽约大学计算机科学系) ; BAIR, UC Berkeley(伯克利大学BAIR)
专题命中 具身推理 :world model(title,abstract);embodied agent(abstract);分类 cs.AI、cs.CV、cs.LG
AI总结 本文提出一种轻量级策略,将高层动作映射到低层关节动作序列,结合冻结的世界模型,实现预测未来观察的提升世界模型,有效降低规划复杂度。
Comments Accepted to ECCV2026. Edited policy masking
使用基于接地潜在动作世界模型的异构演示模仿学习
机构 * University of Oxford(牛津大学)
专题命中 具身推理 :world model(title,abstract);manipulation(abstract);分类 cs.RO、cs.AI、cs.LG
AI总结 提出GLAM方法,通过共享潜在动作空间对齐异构数据源,学习接地潜在动作世界模型,在数据稀缺时提升模仿学习性能,平均任务成功率提高48%。
Comments 17 pages, 8 figures. Project page: https://viccccciv.github.io/glam/
FlowMPC:利用世界模型改进流匹配策略
机构 * Stanford University(斯坦福大学)
专题命中 具身推理 :world model(title,abstract);manipulation(abstract);分类 cs.RO、cs.AI、cs.LG
AI总结 提出FlowMPC框架,结合流匹配模仿策略与学习的世界模型,通过MPPI规划提升测试时性能,在ManiSkill操作任务中显著提高成功率。
面向刚性物体的学习动作条件与对象中心高斯溅射世界模型
机构 * Intelligent Perception in Technical Systems Group(技术系统智能感知组)
专题命中 具身推理 :world model(title,abstract);manipulation(abstract);分类 cs.RO、cs.CV、cs.LG
AI总结 提出MRO-GWM模型,通过对象中心高斯表示和时空变换器架构,学习刚性物体在3D中的动作条件动力学,支持多物体场景和部分观测下的未来运动预测。
学习并行代码的推理世界模型
专题命中 具身推理 :world model(title,summary_cn)
AI总结 提出Parallel-Code World Models (PCWMs),通过推理LLM直接预测并行代码的工具输出,以解决并行代码训练数据稀缺问题,在数据竞争预测和性能分析任务上取得显著提升。
通过世界模型的模拟推理实现通用代理规划
机构 * Institute of Foundation Models (IFM)(基础模型研究所) ; Carnegie Mellon University(卡内基梅隆大学) ; UC San Diego(南加州大学)
专题命中 具身推理 :world model(title,abstract);navigation(abstract);分类 cs.RO、cs.AI、cs.LG
AI总结 本文提出通过模拟推理实现通用代理规划,利用世界模型进行未来状态预测,提升决策能力,通过SiRA架构在不同任务中取得更高任务完成率。
Comments Winner of Berkeley LLM Agents Hackathon (Fundamentals Track); code available at https://github.com/sailing-lab/sira
ChannelAgent-empowered Electromagnetic Space World Model: A Case Study on Agent-Driven Channel Generation for 6G AI-Native Air Interface
专题命中 具身推理 :world model(title,title_cn)
AI总结 本文提出了一种基于ChannelAgent的电磁空间世界模型,用于6G AI原生空气接口中的智能体驱动信道生成,通过多模感知、ChannelAgent智能核心和反馈更新的闭环过程,实现任务感知决策和自主适应。
Comments 6 pages, 7 figures
EA-WM:事件感知生成世界模型与结构运动-视觉动作场
机构 * Fudan University(复旦大学) ; Zhongguancun Academy(中关村学院) ; Zhongguancun Institute of Artificial Intelligence(中关村人工智能研究院) ; University of Science and Technology of China(中国科学技术大学) ; DeepCybo(深瞳)
专题命中 具身推理 :world model(title,abstract);robotic(abstract);分类 cs.RO、cs.AI、cs.CV
AI总结 EA-WM通过结构化运动-视觉动作场闭环连接运动控制与视觉感知,提升机器人空间几何和细粒度交互动态的生成精度。
Comments Preprint. 22 pages, 10 figures
世界模型中的安全性、安全性和认知风险
机构 * SovereignAI Security Labs(SovereignAI安全实验室)
专题命中 具身推理 :world model(title,abstract);robotics(abstract);分类 cs.RO、cs.AI、cs.LG
AI总结 本文探讨了世界模型在自主决策中的安全、安全及认知风险,提出了轨迹持久性和表征风险的定义,并通过实验验证了对抗攻击的效果,强调了对世界模型的严谨性要求。
Comments version 2, 29 pages, 1 figure (6 panels), 3 tables. Empirical proof-of-concept on GRU/RSSM/DreamerV3 architectures
稀疏想象用于高效的视觉世界模型规划
机构 * Graduate School of Data Science, Seoul National University(数据科学研究生院,首尔国立大学) ; Department of Electrical and Computer Engineering, Seoul National University(电气与计算机工程系,首尔国立大学)
专题命中 具身推理 :world model(title,abstract);robotics(abstract);分类 cs.RO、cs.AI、cs.CV
AI总结 本文提出稀疏想象方法,通过减少标记处理数量提升视觉世界模型规划效率,同时保持高控制保真度。
Comments Accepted to ICLR 2026; Project Page: https://nikriz1.github.io/sparse_imagination/
RoboSpatial: 教授机器人2D和3D视觉-语言模型空间理解能力
机构 * The Ohio State University(俄亥俄州立大学) ; NVIDIA(英伟达)
专题命中 具身推理 :robotics(title,abstract);manipulation(abstract);分类 cs.RO、cs.AI、cs.CV
AI总结 RoboSpatial通过构建大规模空间理解数据集,提升机器人2D和3D视觉-语言模型的空间推理能力。
Comments CVPR 2025 (Oral); Project Website: https://chanh.ee/RoboSpatial
ContactGaussian-WM: 从视频中学习物理基础的世界模型
专题命中 具身推理 :world model(title,abstract);robotic(abstract);分类 cs.RO、cs.AI、cs.CV
AI总结 ContactGaussian-WM通过从稀疏视频中学习物理定律,提升机器人规划与模拟中的复杂动态场景建模能力。
Astra:通用交互世界模型与自回归去噪
机构 * Tsinghua University(清华大学) ; Kuaishou Technology(快手科技)
专题命中 具身推理 :world model(title,abstract);manipulation(abstract);分类 cs.AI、cs.CV、cs.LG
AI总结 Astra提出了一种通用交互世界模型,通过自回归去噪和动作感知适配器实现长周期视频预测与多样化交互。
Comments Accepted in ICLR 2026. Code is available at: https://github.com/EternalEvan/Astra
TraceGen:在3D轨迹空间中进行世界建模,实现跨躯体视频的学习
机构 * University of Maryland, College Park(马里兰大学 College Park分校)
专题命中 具身推理 :world model(title,abstract);manipulation(abstract);分类 cs.RO、cs.CV、cs.LG
AI总结 TraceGen通过3D轨迹空间实现跨躯体视频学习,利用紧凑的轨迹表示提升机器人任务学习效率与泛化能力。
ENACT:通过视角交互的世界建模评估具身认知
机构 * Northwestern University(西北大学) ; Stanford University(斯坦福大学) ; UCLA(加州大学洛杉矶分校)
专题命中 具身推理 :world model(title,abstract);robotics(abstract);分类 cs.RO、cs.AI、cs.CV
AI总结 ENACT通过视角交互的世界建模评估具身认知,揭示VLMs在长周期交互中与人类表现差距扩大,且模型在逆向任务中表现更优。
Comments Preprint version
为世界模型评估适应视觉-语言模型
机构 * University of Oxford(牛津大学) ; Microsoft Research(微软研究院)
专题命中 具身推理 :world model(title,abstract);embodied AI(abstract);分类 cs.AI、cs.CV、cs.LG
AI总结 本文提出UNIVERSE,一种基于视觉-语言模型的视频世界模型评估器,通过适应不同任务格式和数据约束,实现了细粒度、时间敏感的评估,与任务特定检查点性能相当,并在多种环境中验证了其与人类判断的一致性。
Comments NeurIPS LAW 2025 (Oral)
机构 * Faculty of Information Technology, Monash University(信息技术学院,墨尔本大学) ; Department of Electrical Engineering, Sharif University of Technology(电气工程系,谢赫大学)
专题命中 具身推理 :robotics(title,abstract);embodied AI(abstract);分类 cs.RO、cs.AI、cs.CV
机构 * Harbin Institute of Technology(哈尔滨工业大学) ; Huawei Noah’s Ark Lab(华为诺亚实验室)
专题命中 具身推理 :world model(title,abstract);robotics(abstract);分类 cs.RO、cs.AI、cs.CV
Comments 17 pages, 5 figures
专题命中 具身推理 :world model(title,abstract);robotics(abstract);分类 cs.RO、cs.AI、cs.LG
Comments Website: https://danijar.com/dreamer4/
机构 * SETLabs Resarch GmbH(SETL实验室)
专题命中 具身推理 :robotics(title,abstract);robotic(abstract);分类 cs.RO、cs.AI、cs.CV
Comments 11 pages, 3 figures
专题命中 具身推理 :world model(title,abstract);navigation(abstract);分类 cs.RO、cs.AI、cs.CV
Comments Accepted by MICCAI2024
PIRATR:基于变换器的参数化物体推理用于机器人应用的3D点云
机构 * AIT Austrian Institute of Technology Center for Vision, Automation & Control(奥地利技术研究院视觉、自动化与控制中心)
专题命中 具身推理 :robotic(title,abstract);world model(abstract);分类 cs.RO、cs.CV;robotics(comments)
AI总结 PIRATR通过端到端3D点云检测框架,结合变换器实现参数化物体的6自由度姿态和属性估计,适用于机器人应用。
Comments 8 Pages, 11 Figures, Accepted at 2026 IEEE International Conference on Robotics & Automation (ICRA) Vienna
传达计划,而非感知:基于具身世界模型的可扩展多智能体协调
机构 * Department of Computer Science University of Wisconsin-Madison(计算机科学系 明尼苏达大学) ; Department of Computer Science National University of Singapore(计算机科学系 新加坡国立大学)
专题命中 具身推理 :world model(title,abstract);embodied AI(abstract);分类 cs.AI、cs.LG
AI总结 本文提出基于具身世界模型的意图通信方法,通过端到端学习与工程化设计对比,展示在复杂环境下更优的协调能力。
Comments Published in the Proceedings of the 39th Conference on Neural Information Processing Systems (NeurIPS 2025) Workshop: Scaling Environments for Agents (SEA). Additionally accepted for presentation in the NeurIPS 2025 Workshop: Embodied World Models for Decision Making (EWM) and the NeurIPS 2025 Workshop: Optimization for Machine Learning (OPT)
机构 * Department of Computer Science University of Wisconsin-Madison(计算机科学系 威斯康星大学麦迪逊分校)
专题命中 具身推理 :world model(title,abstract);embodied agent(abstract);分类 cs.AI、cs.LG
Comments Published in the proceedings of the 39th Conference on Neural Information Processing Systems (NeurIPS 2025) Workshop: Scaling Environments for Agents (SEA). Additionally accepted for presentation in NeurIPS 2025 Workshop: Embodied World Models for Decision Making
专题命中 具身推理 :robotics(title);world model(title);分类 cs.RO
专题命中 具身推理 :world model(title,abstract);navigation(abstract);分类 cs.RO;robotics(comments)
Comments IROS 2023 workshop World Models and Predictive Coding in Cognitive Robotics and IROS 2023 workshop Learning Robot Super Autonomy
因果世界模型的统一视角:从观测到表征再到结构
机构 * Imperial College London(帝国理工学院)
专题命中 具身推理 :world model(title,abstract);分类 cs.AI、cs.CV
AI总结 本文从因果视角研究不同抽象层级的世界模型,提出因果世界模型的形式定义,关联相关领域工作并阐明其组件可从数据恢复的条件,为世界模型奠定支持因果推理与决策的基础。
从经济智能体到智能体经济:经济世界模型的系统蓝图
机构 * Shenzhen Loop Area Institute(深圳河套学院) ; School of Data Science, The Chinese University of Hong Kong, Shenzhen(香港中文大学(深圳)数据科学学院) ; University of Hong Kong(香港大学) ; Nanyang Technological University(南洋理工大学)
专题命中 具身推理 :world model(title,abstract);分类 cs.AI、cs.LG
AI总结 本文提出经济世界模型(EWM)的六级能力阶梯实施蓝图,旨在加速可作为人类决策沙箱与AI智能体基础的下一代高保真经济模拟环境开发。
Comments Project page: https://github.com/FreedomIntelligence/Awesome-Economic-World-Models