arXivDaily arXiv每日学术速递 周一至周五更新
arXiv周末暂无论文更新,休息一下吧,周末愉快~~

视觉与机器人

世界模型

面向环境建模、时序预测、仿真规划、具身智能和自动驾驶的世界模型方法与应用。

共收录 4308 信号源:cs.AI, cs.LG, cs.CV, cs.RO, cs.MA

1. 通用世界模型 4308 篇

2510.16039 2025-10-21 cs.LG cs.AI 93%

Vector Quantization in the Brain: Grid-like Codes in World Models

Xiangyuan Peng, Xingsi Dong, Si Wu

机构 * PKU-Tsinghua Center for Life Sciences(北大-清华生命科学中心) Academy for Advanced Interdisciplinary Studies(先进跨学科研究学院) IDG/McGovern Institute for Brain Research(IDG/麦戈文脑科学研究院) Center of Quantitative Biology, Peking University(北京大学定量生物学中心) School of Psychological and Cognitive Sciences(心理与认知科学学院) Key Laboratory of Machine Perception (Ministry of Education)(教育部机器感知重点实验室)

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

详情

展开后加载摘要…

URL PDF HTML 收藏
2509.12387 2025-09-17 cs.LG cs.AI stat.ML 93%

Causal-Symbolic Meta-Learning (CSML): Inducing Causal World Models for Few-Shot Generalization

Mohamed Zayaan S

机构 * smail.iitm.ac.in(印度理工学院)

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

Comments 10 pages, 4 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2508.11200 2025-08-18 cs.RO cs.AI 93%

Visuomotor Grasping with World Models for Surgical Robots

Hongbin Lin, Bin Li, Kwok Wai Samuel Au

机构 * Chinese University of Hong Kong(香港中文大学) Sunrise Setting Ltd, UK(Sunrise Setting Ltd) SAGE Publications Ltd, UK(SAGE Publications Ltd)

专题命中 通用世界模型 :world model(title);world models(title);world model(title);world models(title)

详情

展开后加载摘要…

URL PDF HTML 收藏
2503.02247 2025-07-22 cs.CV cs.RO 93%

WMNav: Integrating Vision-Language Models into World Models for Object Goal Navigation

Dujun Nie, Xianda Guo, Yiqun Duan, Ruijun Zhang, Long Chen

机构 * Institute of Automation, Chinese Academy of Sciences(中国科学院自动化研究所) School of Computer Science, Wuhan University(武汉大学计算机学院) School of Computer Science, University of Technology Sydney(悉尼大学计算机学院) IAIR, Xi’an Jiaotong University(西安交通大学IAIR)

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

Comments 8 pages, 5 figures

Journal ref IROS 2025

详情

展开后加载摘要…

URL PDF HTML 收藏
2507.09462 2025-07-15 cs.NI 93%

MobiWorld: World Models for Mobile Wireless Network

Haoye Chai, Yuan Yuan, Yong Li

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

Comments 7 pages, 6 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2506.08149 2025-06-11 cs.RO cs.AI 93%

Ego-centric Learning of Communicative World Models for Autonomous Driving

Hang Wang, Dechen Gao, Junshan Zhang

机构 * Department of Electrical and Computer Engineering, University of California, Davis(电气与计算机工程系,加州大学戴维斯分校)

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

详情

展开后加载摘要…

URL PDF HTML 收藏
2506.07450 2025-06-10 cs.AI 93%

Efficient Generation of Diverse Cooperative Agents with World Models

Yi Loo, Akshunn Trivedi, Malika Meghjani

机构 * Singapore University of Technology and Design(新加坡科技设计大学)

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

详情

展开后加载摘要…

URL PDF HTML 收藏
2411.04434 2024-12-19 cs.LG cs.AI 93%

Scaling Laws for Pre-training Agents and World Models

Tim Pearce, Tabish Rashid, Dave Bignell, Raluca Georgescu, Sam Devlin, Katja Hofmann

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

详情

展开后加载摘要…

URL PDF HTML 收藏
2410.22689 2024-10-31 cs.RO cs.AI 93%

Multi-Task Interactive Robot Fleet Learning with Visual World Models

Huihan Liu, Yu Zhang, Vaarij Betala, Evan Zhang, James Liu, Crystal Ding, Yuke Zhu

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

Comments In Proceedings of CoRL 2024

详情

展开后加载摘要…

URL PDF HTML 收藏
2410.19923 2024-10-29 cs.AI cs.LG stat.ME 93%

Language Agents Meet Causality -- Bridging LLMs and Causal World Models

John Gkountouras, Matthias Lindemann, Phillip Lippe, Efstratios Gavves, Ivan Titov

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

Comments Project page: https://j0hngou.github.io/LLMCWM/

详情

展开后加载摘要…

URL PDF HTML 收藏
2405.17940 2024-05-29 cs.RO cs.AI 93%

World Models for General Surgical Grasping

Hongbin Lin, Bin Li, Chun Wai Wong, Juan Rojas, Xiangyu Chu, Kwok Wai Samuel Au

专题命中 通用世界模型 :world model(title);world models(title);world model(title);world models(title)

Journal ref Robotics: Science and Systems 2024

详情

展开后加载摘要…

URL PDF HTML 收藏
2310.12690 2024-05-13 cs.LG cs.AI stat.ML 93%

Neurosymbolic Grounding for Compositional World Models

Atharva Sehgal, Arya Grayeli, Jennifer J. Sun, Swarat Chaudhuri

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

Comments Uploading ICLR,2024 Camera Ready Version

详情

展开后加载摘要…

URL PDF HTML 收藏
2311.09064 2023-11-16 cs.CV cs.LG 93%

Imagine the Unseen World: A Benchmark for Systematic Generalization in Visual World Models

Yeongbin Kim, Gautam Singh, Junyeong Park, Caglar Gulcehre, Sungjin Ahn

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

Comments Published as a conference paper at NeurIPS 2023. The first two authors contributed equally. To download the benchmark, visit https://systematic-visual-imagination.github.io

详情

展开后加载摘要…

URL PDF HTML 收藏
2310.07582 2023-10-24 cs.LG cs.AI 93%

Linear Latent World Models in Simple Transformers: A Case Study on Othello-GPT

Dean S. Hazineh, Zechen Zhang, Jeffery Chiu

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

详情

展开后加载摘要…

URL PDF HTML 收藏
2301.06294 2023-01-18 cs.AI cs.LG cs.SC 93%

Neuro-Symbolic World Models for Adapting to Open World Novelty

Jonathan Balloch, Zhiyu Lin, Robert Wright, Xiangyu Peng, Mustafa Hussain, Aarun Srinivas, Julia Kim, Mark O. Riedl

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

Comments 9 pages, 8 figures, Extended Abstract accepted for presentation at AAMAS 2023

详情

展开后加载摘要…

URL PDF HTML 收藏
2210.12719 2022-10-25 cs.LG cs.AI 93%

Learning General World Models in a Handful of Reward-Free Deployments

Yingchen Xu, Jack Parker-Holder, Aldo Pacchiano, Philip J. Ball, Oleh Rybkin, Stephen J. Roberts, Tim Rocktäschel, Edward Grefenstette

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

Comments To be published at NeurIPS 2022. Code and videos available at https://ycxuyingchen.github.io/cascade/

详情

展开后加载摘要…

URL PDF HTML 收藏
2010.02302 2020-10-07 cs.LG cs.AI stat.ML 93%

Latent World Models For Intrinsically Motivated Exploration

Aleksandr Ermolov, Nicu Sebe

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

Comments NeurIPS 2020 Spotlight; Code is publicly available at https://github.com/htdt/lwm

详情

展开后加载摘要…

URL PDF HTML 收藏
2504.16680 2026-01-09 cs.RO cs.AI cs.LG 93%

Uncertainty-Aware Robotic World Model Makes Offline Model-Based Reinforcement Learning Work on Real Robots

具有不确定性的机器人世界模型使基于模型的离线强化学习在真实机器人上有效

Chenhao Li, Andreas Krause, Marco Hutter

机构 * ETH Zurich(苏黎世联邦理工学院)

专题命中 通用世界模型 :world model(title,abstract);world model(title,abstract);model-based reinforcement learning(title);world models(abstract)

AI总结 本文提出了一种具有不确定性的机器人世界模型,结合MOPO-PPO框架,使基于模型的离线强化学习在真实机器人上有效,通过提高策略的鲁棒性并超越现有基线。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.19804 2026-08-21 cs.AI 新提交 92%

ADAPT: Physics-Aware Diffusion-based World Models for Adaptive Predictive Transferable HVAC Control

ADAPT:面向自适应可迁移HVAC控制的物理感知扩散式世界模型

Xu Yang, Kailai Sun, Dianyu Zhong, Qianchuan Zhao

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

AI总结 本文针对现有HVAC控制方法泛化性差的问题,提出物理感知扩散世界模型ADAPT,在IID控制下可降HVAC能耗7.3%、不适度30.2%,OOD场景下迁移鲁棒性显著优于现有方法。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.13901 2026-08-17 cs.RO 新提交 92%

Ontology-Grounded World Models for Failure Diagnosis and Closed-Loop Repair in Physical AI Systems

用于物理人工智能系统故障诊断与闭环修复的本体论驱动世界模型

Kailin Wang, Haoxiang Jie, Yaoyuan Yan, Jiacheng Zhou, Zhiyou Heng

机构 * AI Lab, Country Garden Services Group(碧桂园服务集团AI实验室) Fudan University(复旦大学) Omni AI

专题命中 通用世界模型 :world model(title);world models(title);world model(title);world models(title)

AI总结 本文提出分层于EV-WM之上的Onto-EV-WM本体驱动接口,在PointMaze、LIBERO-Goal等基准测试中实现高故障修复成功率,为物理AI系统提供有效的故障诊断与闭环修复方案。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.12564 2026-08-14 cs.LG 新提交 92%

Scaling Automatic Research Agents via World Models

通过世界模型扩展自动研究智能体

Xiyuan Yang, Sheikh Sarwar, Jingru Cheng, Zhan Shi, Duanshun Li, Huiyuan Chen, Haiyang Zhang, Chenlei Guo, Jingrui He, Zhenyu Liao

机构 * University of Illinois Urbana-Champaign(伊利诺伊大学厄巴纳-香槟分校) Amazon(亚马逊公司)

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

AI总结 针对自动研究智能体扩展时的训练瓶颈,提出WMRL方法,结合两种缓解措施提升收敛性,训练加速3-4倍且性能优于更大规模智能体,还可迁移至多类任务。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.11174 2026-08-13 cs.RO 版本更新 92%

VIScore: Diagnosing Planning-Relevant Quality in Latent World Models

VIScore:诊断潜在世界模型中与规划相关的质量

Haiyu Wu, Randall Balestriero, Morgan Levine

机构 * Altos Labs(阿尔托斯实验室) Brown University(布朗大学)

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

AI总结 该研究针对潜在世界模型规划成功率与潜在空间属性脱节的问题,提出VIScore指标,覆盖编码器、预测器、规划器,在跨任务场景下斯皮尔曼相关性超0.75,可更好解释规划成功率。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.07809 2026-08-11 cs.AI 新提交 92%

CausalNav: Reliability-Certified Causal World Models for Control under Physical-Parameter Shift

CausalNav:用于物理参数偏移下控制的可靠性可验证因果世界模型

Yiyao Zhang, Diksha Goel, Hussain Ahmad, Shixun Huang, Jun Shen

机构 * University of Wollongong(卧龙岗大学) CSIRO’s Data61(联邦科学与工业研究组织Data61) Adelaide University(阿德莱德大学)

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

AI总结 本文提出CausalNav控制器,其结合因果转移图与多门控可靠性验证机制,在物理参数偏移的CartPole-v1和Pendulum-v1任务上,较9种基准取得最佳平均排名,关键在于经认证的弃权(不执行)提升了部署安全性。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.00591 2026-08-11 cs.AI 版本更新 92%

Why Does the Future Branch? Identifiable Closure Tests for Stochastic Physical World Models

未来为何分支?随机物理世界模型的可识别闭合测试

Yibin Dong

机构 * Shandong University(山东大学)

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

AI总结 针对随机物理世界模型无法从普通转移数据识别未来分支原因的问题,提出ClosurePairs干预评估协议,可精准分解状态混淆与过程噪声,大幅提升归因准确率。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.04378 2026-08-06 cs.SD cs.LG eess.AS 新提交 92%

Helping Music Co-Creation Agents 'Listen' Well: Hierarchical Self-Supervised World Models for Understanding and Generation

助力音乐协同创作智能体“良好聆听”:用于理解与生成的分层自监督世界模型

Scott H. Hawley

机构 * Belmont University(贝尔蒙特大学)

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

AI总结 本研究提出分层自监督世界模型,通过Swin V2编码器与条件流匹配模型构建协同音乐创作智能体,提升了和弦与调式检测准确率,可快速生成音乐建议并支持交互演示。

Comments 20 pages, 14 figures. A 6-page version was submitted to the NeurIPS 2026 Creative AI Track. Supplemental website with listening examples: https://drscotthawley.github.io/midi-rae-jepa-son/. Live demo: https://drscotthawley-midi-rae-jepa-son.hf.space/

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.18696 2026-07-22 cs.AI 新提交 92%

Do AI-Native Biotechs Need Departments? Benchmarking Company World Models for AI-Driven Drug Development

人工智能原生生物技术公司需要部门吗?人工智能驱动药物研发的公司世界模型基准测试

Yinan Wang

机构 * Noah AI Research(诺亚人工智能研究)

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

AI总结 研究人工智能原生生物技术公司组织模式,提出公司世界模型,用含45个案例的虚拟实验室基准测试,比较多种架构,发现价值转换架构表现优,核心操作原语应是资产到价值状态而非静态组织结构图,不过研究仅限虚拟实验室。

Comments Working paper. Includes public no-label benchmark cases and dry-lab evaluation artifacts. No wet-lab, patient-level, clinical, regulatory, or investment validation is claimed

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.15439 2026-07-20 cs.AI 新提交 92%

Do Coding Agents Need Executable World Models, Simplification, and Verification to Solve ARC-AGI-3?

解决ARC-AGI-3编码智能体是否需要可执行世界模型、简化和验证?

Sergey Rodionov

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

AI总结 研究探讨解决ARC-AGI-3时编码智能体是否需可执行世界模型、简化和验证。通过四个基于Codex的嵌套智能体评估,发现各变体随模型和推理强度改进,组件影响因设置而异,完整验证处理最佳,文本变体在部分设置中表现出色。

Comments 31 pages, 2 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.14076 2026-07-16 cs.CV 新提交 92%

From Pixels to States: Rethinking Interactive World Models as Game Engines

从像素到状态:将交互式世界模型重新思考为游戏引擎

Zhen Li, Zian Meng, Shuwei Shi, Mingliang Zhai, Jiaming Tan, Chuanhao Li, Kaipeng Zhang

机构 * Alaya Lab(阿亚实验室)

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

AI总结 本文从玩家动作控制等四个维度审视交互式游戏世界建模,分析现有方法优缺点,还为《黑神话:悟空》提供可扩展数据引擎,收集相关游戏资源用于状态感知建模,助力推动交互式游戏世界发展。

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.10389 2026-07-14 cs.DC cs.LG 新提交 92%

Stateful Worlds, Stateless Elasticity: Exact-State Serving for Interactive World Models

有状态世界,无状态弹性:交互式世界模型的精确状态服务

Jin Li, Jiawei Chen

机构 * Harvard University(哈佛大学) Independent Researcher(独立研究者)

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

AI总结 研究交互式世界模型精确状态服务中的调度问题,提出 WorldMove 方法,能快速迁移缓存且保证位相同,通过可接受性条件等解决调度难题,实现跨传输和验证的联合调度,提升集群可调度性。

Comments 20 pages. Extended version

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.02865 2026-07-07 cs.RO 新提交 92%

DREAMSTEER: Latent World Models Can Steer VLA Policies During Deployment Without Any Finetuning

DREAMSTEER:潜在世界模型可在部署期间引导VLA策略,无需任何微调

Hanchen Cui, Sergio Arnaud, Arjun Majumdar, Daniel Dugas, Elie Aljalbout, Karthik Desingh, Krishna Murthy Jatavallabhula, Franziska Meier

机构 * Fundamental AI Research (FAIR), Meta(基础人工智能研究(FAIR),Meta公司) University of Minnesota Twin Cities(明尼苏达大学双城分校)

专题命中 通用世界模型 :world model(title,abstract);world models(title);world model(title,abstract);world models(title)

AI总结 研究针对预训练视觉语言动作(VLA)策略在部署时分布偏移的问题,提出DREAMSTEER框架,利用潜在世界模型和价值模型引导策略,无需微调或修改参数,提升了任务成功率和指令遵循准确率。

Comments 19 pages, 12 figures. Project page: https://dream-steer.github.io/

详情

展开后加载摘要…

URL PDF HTML 收藏