arXivDaily arXiv每日学术速递 周一至周五更新
arXiv周末暂无论文更新,休息一下吧,周末愉快~~

视觉与机器人

世界模型

面向环境建模、时序预测、仿真规划、具身智能和自动驾驶的世界模型方法与应用。

共收录 4308 信号源:cs.AI, cs.LG, cs.CV, cs.RO, cs.MA

1. 通用世界模型 4308 篇

2203.05955 2022-08-03 cs.RO cs.AI 85%

Tactile-Sensitive NewtonianVAE for High-Accuracy Industrial Connector Insertion

Ryo Okumura, Nobuki Nishio, Tadahiro Taniguchi

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

Comments 7 pages, 4 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2203.11024 2022-03-22 cs.AI cs.RO cs.SY eess.SY 85%

Multi-View Dreaming: Multi-View World Model with Contrastive Learning

Akira Kinose, Masashi Okada, Ryo Okumura, Tadahiro Taniguchi

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.AI、cs.RO

Comments 7 pages, 8 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2107.03038 2021-07-08 cs.RO cs.CV 85%

Maintaining a Reliable World Model using Action-aware Perceptual Anchoring

Ying Siu Liang, Dongkyu Choi, Kenneth Kwok

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.CV、cs.RO

Comments 7 pages, 3 figures

Journal ref 2021 International Conference on Robotics and Automation (ICRA 2021)

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.13492 2026-08-14 cs.AI 新提交 84%

AlayaWorld: Interactive Long-Horizon World Modeling - Full Technical Report (v1.1)

AlayaWorld:交互式长时世界建模——完整技术报告(v1.1)

AlayaWorld Team, Kaipeng Zhang, Chuanhao Li, Yifan Zhan, Yongtao Ge, Yuanyang Yin, Jiaming Tan, Kang He, Liaoyuan Fan, Mingliang Zhai, Ruicong Liu, Xiaojie Xu, Xuangeng Chu, Zhen Li, Zhengyuan Lin, Zhixiang Wang, Zian Meng, Zihui Gao

机构 * Alaya Lab(Alaya实验室)

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.AI

AI总结 本报告改进AlayaWorld,通过调整条件信号设计等六项修改优化交互式长时世界建模,保留原有架构等核心部分。

Comments Authors are listed alphabetically by the first name and their role. See the contribution section for details

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.27537 2026-07-14 cs.CV 版本更新 84%

MemoBench: Benchmarking World Modeling in Dynamically Changing Environments

MemoBench: 动态变化环境中的世界建模基准测试

Haoyu Chen, Kaichen Zhou, Hang Hua, Kaile Zhang, Jingwen Qian, Wufei Ma, Haonan Chen, Chunjiang Liu, Yizhou Zhao, Xiaoyuan Wang, Weiyue Li, Alan Yuille, Paul Pu Liang, Yilun Du

机构 * Harvard University(哈佛大学) MIT(麻省理工学院) MIT-IBM Watson AI Lab(MIT-IBM沃森人工智能实验室) Boston University(波士顿大学) Google(谷歌) JHU(约翰霍普金斯大学) CMU(卡内基梅隆大学) Kempner Institute(肯普纳研究所)

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.CV

AI总结 提出MemoBench基准,通过目标消失-重现范式评估视频生成模型在动态环境中的记忆一致性,涵盖合成与真实场景,揭示现有模型的关键挑战。

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.25063 2026-06-30 cs.LG cond-mat.mtrl-sci 84%

Reinforcement Learning with a Bilevel World-Model Architecture for Scan-Order Optimisation in Laser Directed Energy Deposition

激光增材制造扫描顺序优化的强化学习:用于奖励和世界模型诊断的双层代理-有限元分析诊断框架

Xian Wu, Haoran Li, Yuanqi Chu, Dongbin Zhao, Bin Wang

机构 * College of Engineering, Design and Physical Sciences, Brunel University London(布鲁内尔大学伦敦工程、设计与物理科学学院) Pattern Recognition Laboratory, Institute of Automation, Chinese Academy of Sciences(中国科学院自动化研究所模式识别实验室) ISIS Neutron and Muon Source, Science and Technology Facilities Council, Rutherford Appleton Laboratory(Rutherford Appleton实验室,科学与技术设施委员会ISIS中子与μ子源)

专题命中 通用世界模型 :world-model(title);world-model(title);分类 cs.LG

AI总结 本文提出一个双层代理-有限元分析诊断框架,通过轻量代理和稀疏有限元模拟,诊断强化学习在激光增材制造扫描顺序优化中的奖励和世界模型保真度问题。

Comments 31 pages, 7 figures, 3 tables

详情

展开后加载摘要…

URL PDF HTML 收藏
2604.28185 2026-06-16 cs.CV 版本更新 84%

Visual Generation in the New Era: An Evolution from Atomic Mapping to Agentic World Modeling

新时代的视觉生成:从原子映射到智能世界建模的演进

Keming Wu, Zuhao Yang, Kaichen Zhang, Shizun Wang, Haowei Zhu, Sicong Leng, Zhongyu Yang, Qijie Wang, Sudong Wang, Ziting Wang, Zili Wang, Hui Zhang, Haonan Wang, Hang Zhou, Yifan Pu, Xingxuan Li, Fangneng Zhan, Bo Li, Lidong Bing, Yuxin Song, Ziwei Liu, Wenhu Chen, Jingdong Wang, Xinchao Wang, Xiaojuan Qi, Shijian Lu, Bin Wang

机构 * Tsinghua University(清华大学) Nanyang Technological University(南洋理工大学) University of Hong Kong(香港大学) National University of Singapore(新加坡国立大学) University of Waterloo(滑铁卢大学) StepFun MiroMind Baidu(百度) Fudan University(复旦大学) Hong Kong University of Science and Technology(香港科技大学) Hong Kong University of Science and Technology (Guangzhou)(香港科技大学(广州)) LMMs-Lab(LMMs实验室)

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.CV

AI总结 提出五级分类法(原子生成、条件生成、上下文生成、智能生成、世界建模生成),分析流匹配、统一理解与生成模型等关键技术,并指出现有评估高估感知质量而忽视结构、时序和因果缺陷。

Comments Project Page: https://github.com/EvolvingLMMs-Lab/Evolving-Visual-Generation

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.16927 2026-05-19 cs.AI 84%

From Static Risk to Dynamic Trajectories: Toward World-Model-Inspired Clinical Prediction

从静态风险到动态轨迹:迈向世界模型启发的临床预测

Pujun Feng, Xiaoyu Guo, Seyed Ehsan Saffari, Min Hun Lee, Siew-Kei Lam, Erik Cambria, Xibin Sun, Yangtao Zhou, Tong Yang, Xiaoyu Zhang, Tao Tan, Yue Sun, Bin Cui

机构 * Faculty of Applied Sciences, Macao Polytechnic University(澳门理工学院应用科学学院) School of Software & Microelectronics, Peking University(北京大学软件与微电子学院) School of Computing and Information Systems, Singapore Management University(新加坡管理学院计算机与信息系统学院) College of Computing and Data Science, Nanyang Technological University(南洋理工大学计算与数据科学学院) School of Public Health, Peking University(北京大学公共卫生学院) School of Computer Science and Technology, Xidian University(西安电子科技大学计算机科学与技术学院) School of Computer, Peking University(北京大学计算机学院) School of Computer Science and Technology, Beijing Institute of Technology(北京理工大学计算机科学与技术学院) Centre for Biomedical Data Science, Duke-NUS Medical School, National University of Singapore(新加坡国立大学杜克-国立新加坡医学学院生物医学数据科学中心) Duke-NUS AI + Medical Sciences Initiative, Duke-NUS Medical School(杜克-国立新加坡医学学院AI+医学科学计划)

专题命中 通用世界模型 :world-model(title);world-model(title);分类 cs.AI

AI总结 本文探讨了临床AI中干预感知的疾病轨迹建模方法,提出了统一框架,结合了预测、反事实轨迹和政策评估,以解决治疗分配、时间变化混杂和观察偏差问题,推动临床预测向决策级证据发展。

详情

展开后加载摘要…

URL PDF HTML 收藏
2505.02072 2026-05-13 cs.CL cs.AI 84%

Express Your Doubts -- Probabilistic World Modeling Should not be Based on Token logprobs

表达怀疑——概率世界建模不应基于token logprobs

Eitan Wagner, Omri Abend

机构 * Eitan Wagner Omri Abend

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.AI

AI总结 本文探讨了大型语言模型作为概率估计器在世界概率估计中的应用问题,指出基于token logprobs的局限性,并提倡第二阶预测方法以提高概率合理性。

Comments Accepted to ICML 2026 (position track)

详情

展开后加载摘要…

URL PDF HTML 收藏
2511.22039 2026-04-15 cs.CV 84%

SparseWorld-TC: Trajectory-Conditioned Sparse Occupancy World Model

SparseWorld-TC: 基于轨迹的稀疏占用世界模型

Jiayuan Du, Yiming Zhao, Zhenglong Guo, Yong Pan, Wenbo Hou, Zhihui Hao, Kun Zhan, Qijun Chen

机构 * Tongji University(同济大学) Li Auto Inc(力汽车公司)

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.CV

AI总结 本文提出了一种基于轨迹的未来3D场景占用预测新架构,通过端到端方式直接从原始图像特征预测多帧占用,避免了离散token化和BEV表示的限制,实现了nuScenes基准上的1-3秒占用预测最优性能。

Comments Accepted by CVPR2026 as an oral

详情

展开后加载摘要…

URL PDF HTML 收藏
2604.02580 2026-04-06 cs.LG 84%

VoxelCodeBench: Benchmarking 3D World Modeling Through Code Generation

VoxelCodeBench:通过代码生成进行3D世界建模的基准测试

Yan Zheng, Florian Bordes

机构 * FAIR at Meta(Meta FAIR) The University of Texas at Austin(德克萨斯大学奥斯汀分校)

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.LG

AI总结 本文提出VoxelCodeBench基准,通过代码生成评估3D空间推理能力,发现生成可执行代码易,但生成空间正确输出难,尤其在几何构造和多物体组合上挑战大。

详情

展开后加载摘要…

URL PDF HTML 收藏
2510.02315 2026-03-26 cs.CV 84%

FOCUS: Optimal Control for Multi-Entity World Modeling in Text-to-Image Generation

FOCUS:多实体世界建模中的最优控制

Eric Tillmann Bill, Enis Simsar, Thomas Hofmann

机构 * ETH Zürich(苏黎世联邦理工学院)

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.CV

AI总结 本文提出FOCUS框架,通过将流匹配转化为随机最优控制,解决文本生成图像中多实体场景的属性泄露和身份纠缠问题,提出两种算法提升多实体对齐性能。

Comments Project Page: https://ericbill21.github.io/FOCUS/

详情

展开后加载摘要…

URL PDF HTML 收藏
2603.05815 2026-03-09 cs.RO 84%

Hierarchical Latent Action Model

层次化潜在动作模型

Hanjung Kim, Lerrel Pinto, Seon Joo Kim

机构 * Yonsei University(延世大学) New York University(纽约大学)

专题命中 通用世界模型 :world model(abstract,comments);world models(abstract,comments);world model(abstract,comments);world models(abstract,comments)

AI总结 HiLAM通过建模长期时间信息,从无动作视频中发现高层次潜在技能,提升了动态技能发现的鲁棒性。

Comments ICLR 2026 Workshop - 2nd Workshop on World Models: Understanding, Modelling and Scaling

详情

展开后加载摘要…

URL PDF HTML 收藏
2507.07978 2025-12-08 cs.CV 84%

Martian World Model: Controllable Video Synthesis with Physically Accurate 3D Reconstructions

火星世界模型:可控视频合成与物理准确的3D重建

Longfei Li, Zhiwen Fan, Wenyan Cong, Xinhang Liu, Yuyang Yin, Matt Foutter, Panwang Pan, Chenyu You, Yue Wang, Zhangyang Wang, Yao Zhao, Marco Pavone, Yunchao Wei

机构 * BJTU(北京工业大学) UT Austin(德克萨斯大学奥斯汀分校) HKUST(香港科技大学) Stanford University(斯坦福大学) XMU(厦门大学) SBU(雪城大学) USC(南加州大学) NVIDIA(英伟达)

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.CV

AI总结 本文提出M3arsSynth和MarsGen,通过物理准确的3D重建生成逼真的火星视频,提升任务模拟与机器人训练的可视化效果。

Comments Project Page: https://marsgenai.github.io

详情

展开后加载摘要…

URL PDF HTML 收藏
2511.08536 2025-11-12 cs.CV 84%

3D4D: An Interactive, Editable, 4D World Model via 3D Video Generation

Yunhong He, Zhengqing Yuan, Zhengzhong Tu, Yanfang Ye, Lichao Sun

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.CV

Comments Accepted by AAAI 2026 Demo Track

详情

展开后加载摘要…

URL PDF HTML 收藏
2510.15041 2025-10-20 cs.CV 84%

Generalized Dynamics Generation towards Scannable Physical World Model

Yichen Li, Zhiyi Li, Brandon Feng, Dinghuai Zhang, Antonio Torralba

机构 * MIT CSAIL(麻省理工学院计算机科学与人工智能实验室) Microsoft(微软公司)

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.CV

详情

展开后加载摘要…

URL PDF HTML 收藏
2508.19851 2025-08-28 cs.AI 84%

Tracking World States with Language Models: State-Based Evaluation Using Chess

Romain Harang, Jason Naradowsky, Yaswitha Gujju, Yusuke Miyao

机构 * University of Tokyo(东京大学)

专题命中 通用世界模型 :world model(abstract,comments);world models(abstract,comments);world model(abstract,comments);world models(abstract,comments)

Comments Spotlight presentation at ICML 2025 Workshop on Assessing World Models

详情

展开后加载摘要…

URL PDF HTML 收藏
2508.14704 2025-08-21 cs.AI cs.CL 84%

MCP-Universe: Benchmarking Large Language Models with Real-World Model Context Protocol Servers

Ziyang Luo, Zhiqi Shen, Wenzhuo Yang, Zirui Zhao, Prathyusha Jwalapuram, Amrita Saha, Doyen Sahoo, Silvio Savarese, Caiming Xiong, Junnan Li

机构 * Salesforce AI Research(Salesforce人工智能研究)

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.AI

Comments Website: https://mcp-universe.github.io

详情

展开后加载摘要…

URL PDF HTML 收藏
2507.01823 2025-07-03 cs.LG cs.RO 84%

TD-MPC-Opt: Distilling Model-Based Multi-Task Reinforcement Learning Agents

Dmytro Kuzmenko, Nadiya Shvai

机构 * Department of Multimedia Systems, NaUKMA(多媒体系统系,NaUKMA) Department of Mathematics, NaUKMA(数学系,NaUKMA)

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

Comments Preprint of a manuscript submitted for peer review

详情

展开后加载摘要…

URL PDF HTML 收藏
2506.13761 2025-06-17 cs.RO 84%

Prompting with the Future: Open-World Model Predictive Control with Interactive Digital Twins

Chuanruo Ning, Kuan Fang, Wei-Chiu Ma

机构 * Cornell University(康奈尔大学)

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.RO

详情

展开后加载摘要…

URL PDF HTML 收藏
2412.07375 2025-02-26 cs.CV 84%

StoryWeaver: A Unified World Model for Knowledge-Enhanced Story Character Customization

Jinlu Zhang, Jiji Tang, Rongsheng Zhang, Tangjie Lv, Xiaoshuai Sun

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.CV

详情

展开后加载摘要…

URL PDF HTML 收藏
2402.08268 2025-02-05 cs.LG 84%

World Model on Million-Length Video And Language With Blockwise RingAttention

Hao Liu, Wilson Yan, Matei Zaharia, Pieter Abbeel

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.LG

详情

展开后加载摘要…

URL PDF HTML 收藏
2412.06139 2024-12-10 cs.LG cs.SY eess.SY 84%

Bounded Exploration with World Model Uncertainty in Soft Actor-Critic Reinforcement Learning Algorithm

Ting Qiao, Henry Williams, David Valencia, Bruce MacDonald

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.LG

Comments 8 pages, 7 figures. Accepted as a poster presentation in the Australian Robotics and Automation Association (2023)

Journal ref ISBN: 978-0-6455655-2-2 ISSN: 1448-2053

详情

展开后加载摘要…

URL PDF HTML 收藏
2411.16075 2024-12-02 q-bio.NC cs.AI 84%

The brain versus AI: World-model-based versatile circuit computation underlying diverse functions in the neocortex and cerebellum

Shogo Ohmae, Keiko Ohmae

专题命中 通用世界模型 :world-model(title);world-model(title);分类 cs.AI

详情

展开后加载摘要…

URL PDF HTML 收藏
2410.11359 2024-10-16 cs.LG cs.RO stat.ML 84%

DODT: Enhanced Online Decision Transformer Learning through Dreamer's Actor-Critic Trajectory Forecasting

Eric Hanchen Jiang, Zhi Zhang, Dinghuai Zhang, Andrew Lizarraga, Chenheng Xu, Yasi Zhang, Siyan Zhao, Zhengjie Xu, Peiyu Yu, Yuer Tang, Deqian Kong, Ying Nian Wu

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

详情

展开后加载摘要…

URL PDF HTML 收藏
2308.02136 2024-04-05 cs.RO 84%

World-Model-Based Control for Industrial box-packing of Multiple Objects using NewtonianVAE

Yusuke Kato, Ryo Okumura, Tadahiro Taniguchi

专题命中 通用世界模型 :world-model(title);world-model(title);分类 cs.RO

Comments 7 pages, 8 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2403.10875 2024-03-19 cs.LG 84%

Probabilistic World Modeling with Asymmetric Distance Measure

Meng Song

专题命中 通用世界模型 :world model(title);world model(title);分类 cs.LG

详情

展开后加载摘要…

URL PDF HTML 收藏
2302.04798 2023-02-10 cs.LG cs.AI stat.ML 84%

Equivariant MuZero

Andreea Deac, Théophane Weber, George Papamakarios

专题命中 通用世界模型 :world model(abstract);world-model(abstract);world model(abstract);world-model(abstract)

Comments 9 pages, 3 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.25532 2026-08-18 gr-qc 版本更新 83%

A New Self-Dual Gravitational Instanton Solution on a Local Conformal Kählerian Manifold in a Brane World Model

一种在膜世界模型中局部共形凯勒流形上的新自对偶引力瞬子解

Reinoud Jan Slagter

专题命中 通用世界模型 :world model(title);world model(title)

AI总结 本文在共形膨胀子引力中找到了一种真空类克尔扭曲时空上的精确引力瞬子解,该解由一阶偏微分方程导出,与自对偶性相关,其奇点由五次多项式决定,拓扑为S^3×R/Z_2,并利用克莱因瓶上的对径边界条件描述了霍金粒子蒸发过程,最后揭示了与Janis-Newman-Winicour模型之间的联系。

Comments Version V4 : final. pictures improved --- spelling improved --- comments welcome---73 pages---70 pictures

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.28737 2026-08-03 cs.LG cs.CV cs.RO 新提交 83%

Mirror Learning

镜像学习

Yunpeng Liu, Matthew Niedoba, Oluwanifemi A. Adekanye, Jason Yoo, Yingchen He, Berend Zwartsenberg, Frank Wood

机构 * University of British Columbia(不列颠哥伦比亚大学) Inverted AI Amii

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

AI总结 该研究提出镜像学习框架,通过视频扩散模型的视角变换与逆动力学模型合成镜像数据,用其增强行为克隆训练可提升策略性能,为数据收集提供替代方案。

详情

展开后加载摘要…

URL PDF HTML 收藏