arXivDaily arXiv每日学术速递 周一至周五更新
arXiv周末暂无论文更新,休息一下吧,周末愉快~~

视觉与机器人

世界模型

面向环境建模、时序预测、仿真规划、具身智能和自动驾驶的世界模型方法与应用。

共收录 6450 信号源:cs.AI, cs.LG, cs.CV, cs.RO, cs.MA

1. 通用世界模型 4308 篇

2603.13295 2026-03-17 cs.LG cs.AI 82%

ICPRL: Acquiring Physical Intuition from Interactive Control

ICPRL: 从交互控制中获取物理直觉

Xinrun Xu, Pi Bu, Ye Wang, Börje F. Karlsson, Ziming Wang, Tengtao Song, Qi Zhu, Jun Song, Shuo Zhang, Zhiming Ding, Bo Zheng

机构 * Institute of Software, Chinese Academy of Science(中国科学院软件研究所) University of Chinese Academy of Sciences(中国科学院大学) Alibaba Group(阿里巴巴集团) RUC(中国人民大学) PUC-Rio(里约热内卢联邦大学)

专题命中 通用世界模型 :world model(abstract);world-model(abstract);world model(abstract);world-model(abstract)

AI总结 ICPRL通过多轮组相对策略优化,使VLM在动态物理环境中获取物理直觉并适应策略,其世界模型预测潜在动作结果,提升物理谜题解决能力。

Comments 22 pages

详情

展开后加载摘要…

URL PDF HTML 收藏
2502.17100 2026-03-06 cs.LG cs.AI 82%

Generative Models in Decision Making: A Survey

生成模型在决策中的应用:综述

Xinyu Shao, Jianping Zhang, Haozhi Wang, Leo Maxime Brunswic, Kaiwen Zhou, Jiqian Dong, Kaiyang Guo, Zhitang Chen, Jun Wang, Jianye Hao, Xiu Li, Yinchuan Li

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

AI总结 本文综述提出了一种基于概率框架的控制作为推理的系统分类,将生成决策置于其中,通过变分因子分解轨迹后验,概念化了四个功能角色,并探讨了生成模型在高风险领域的应用及挑战。

Comments Project page:https://github.com/xyshao23/Awesome-Generative-Models-for-Decision-Making-Taxonomy

详情

展开后加载摘要…

URL PDF HTML 收藏
2509.00074 2026-02-19 cs.AI cs.CL cs.LG 82%

Language and Experience: A Computational Model of Social Learning in Complex Tasks

语言与经验:复杂任务中的社会学习计算模型

Cédric Colas, Tracey Mills, Ben Prystawski, Michael Henry Tessler, Noah Goodman, Jacob Andreas, Joshua Tenenbaum

机构 * MIT(麻省理工学院) Stanford University(斯坦福大学) Google DeepMind(谷歌DeepMind)

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

AI总结 本文提出了一种计算模型,通过结合语言指导与直接经验,模拟复杂任务中的社会学习过程,并展示了人类与模型之间的知识传递机制。

Comments Code: github.com/ccolas/language_and_experience Demo: cedriccolas.com/demos/language_and_experience

Journal ref ICLR 2026; CogSci 2025

详情

展开后加载摘要…

URL PDF HTML 收藏
2602.00148 2026-02-13 cs.CV cs.AI 82%

Learning Physics-Grounded 4D Dynamics with Neural Gaussian Force Fields

基于神经高斯力场的学习物理 grounded 4D 动力学

Shiqian Li, Ruihong Shen, Junfeng Ni, Chang Pan, Chi Zhang, Yixin Zhu

机构 * Institute for AI, Peking University(北京大学人工智能研究院) School of Psychological and Cognitive Sciences, Peking University(北京大学心理学与认知科学学院) School of EECS, Peking University(北京大学电子工程学院) Department of Automation, Tsinghua University(清华大学自动化系) Yuanpei College, Peking University(北京大学元培学院) State Key Lab of General AI, Peking University(北京大学通用人工智能国家重点实验室) Beijing Key Laboratory of Behavior and Mental Health, Peking University(北京行为与心理健康重点实验室)

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

AI总结 本文提出神经高斯力场(NGFF),通过结合3D高斯感知与物理动力学建模,从多视角RGB输入生成交互式、物理真实的4D视频,提升视频预测的物理 grounded 性。

Comments 43 pages, ICLR 2026

详情

展开后加载摘要…

URL PDF HTML 收藏
2602.05557 2026-02-06 cs.CV cs.RO 82%

PIRATR: Parametric Object Inference for Robotic Applications with Transformers in 3D Point Clouds

PIRATR:基于变换器的参数化物体推理用于机器人应用的3D点云

Michael Schwingshackl, Fabio F. Oberweger, Mario Niedermeyer, Huemer Johannes, Markus Murschitz

机构 * AIT Austrian Institute of Technology Center for Vision, Automation & Control(奥地利技术研究院视觉、自动化与控制中心)

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

AI总结 PIRATR通过端到端3D点云检测框架,结合变换器实现参数化物体的6自由度姿态和属性估计,适用于机器人应用。

Comments 8 Pages, 11 Figures, Accepted at 2026 IEEE International Conference on Robotics & Automation (ICRA) Vienna

详情

展开后加载摘要…

URL PDF HTML 收藏
2602.00608 2026-02-03 cs.AI cs.GR cs.LG 82%

Scalable Generative Game Engine: Breaking the Resolution Wall via Hardware-Algorithm Co-Design

可扩展的生成游戏引擎:通过硬件-算法协同设计突破分辨率限制

Wei Zeng, Xuchen Li, Ruili Feng, Zhen Liu, Fengwei An, Jian Zhao

机构 * School of Microelectronics, Southern University of Science and Technology (SUSTech)(南方科技大学电子学院) Institute of Automation, Chinese Academy of Sciences (CASIA)(中国科学院自动化研究所) University of Waterloo(滑铁卢大学) School of Marxism, Tsinghua University(清华大学马克思主义学院) Zhongguancun Academy(中关村学院)

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

AI总结 本文提出硬件-算法协同设计框架,通过优化资源分配和减少内存带宽使用,实现高分辨率实时生成游戏,提升像素吞吐量50倍,达到26.4 FPS和48.3 FPS的流畅性能。

Comments Preprint, Under Review

详情

展开后加载摘要…

URL PDF HTML 收藏
2511.20462 2025-11-27 cs.CV cs.LG 82%

STARFlow-V: End-to-End Video Generative Modeling with Normalizing Flows

STARFlow-V:基于归一化流的端到端视频生成模型

Jiatao Gu, Ying Shen, Tianrong Chen, Laurent Dinh, Yuyang Wang, Miguel Angel Bautista, David Berthelot, Josh Susskind, Shuangfei Zhai

机构 * Apple(苹果公司)

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

AI总结 STARFlow-V基于归一化流提出端到端视频生成模型,具备端到端学习、鲁棒因果预测和原生似然估计等优势,实现了高质量自回归视频生成。

Comments 21 pages, 9 figures. Code and samples are available at https://github.com/apple/ml-starflow

详情

展开后加载摘要…

URL PDF HTML 收藏
2505.19386 2025-11-27 cs.CV cs.AI 82%

Force Prompting: Video Generation Models Can Learn and Generalize Physics-based Control Signals

力提示:视频生成模型可以学习并泛化基于物理的控制信号

Nate Gillman, Charles Herrmann, Michael Freeman, Daksh Aggarwal, Evan Luo, Deqing Sun, Chen Sun

机构 * Brown University(布朗大学) Google DeepMind(谷歌DeepMind)

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

AI总结 本文提出力提示方法,通过物理力信号生成逼真视频,利用视觉和运动先验实现物理控制信号的泛化,提升世界模型的物理真实性。

Comments Camera ready version (NeurIPS 2025). Code and interactive demos at https://force-prompting.github.io/

详情

展开后加载摘要…

URL PDF HTML 收藏
2511.14291 2025-11-19 cs.CV cs.AI 82%

GEN3D: Generating Domain-Free 3D Scenes from a Single Image

Yuxin Zhang, Ziyu Lu, Hongbo Duan, Keyu Fan, Pengting Luo, Peiyu Zhuang, Mengyu Yang, Houde Liu

机构 * Shenzhen International Graduate School, Tsinghua University, Shenzhen, China(清华大学深圳国际研究生院) Central Media Technology Institute, Huawei, Shenzhen, China(华为中央媒体技术研究所)

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

Comments 5 pages , 2 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2511.11601 2025-11-18 cs.DC cs.AI cs.LG 82%

Mind the Gap: Revealing Inconsistencies Across Heterogeneous AI Accelerators

Elliott Wen, Sean Ma, Ewan Tempero, Jens Dietrich, Daniel Luo, Jiaxing Shen, Kaiqi Zhao, Bruce Sham, Yousong Song, Jiayi Hua, Jia Hong

机构 * The University of Auckland(奥克兰大学) Hong Kong Polytechnic University(香港Polytechnic大学) Victoria University of Wellington(但尼丁维多利亚大学) Harbin Institute of Technology(哈尔滨工业大学) Lingnan University(岭大大学)

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

详情

展开后加载摘要…

URL PDF HTML 收藏
2511.10721 2025-11-17 cs.CV cs.LG 82%

Fast Data Attribution for Text-to-Image Models

Sheng-Yu Wang, Aaron Hertzmann, Alexei A Efros, Richard Zhang, Jun-Yan Zhu

机构 * Carnegie Mellon University(卡内基梅隆大学) Adobe Research(Adobe研究) UC Berkeley(伯克利大学)

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

Comments NeurIPS 2025 camera ready. Project page: https://peterwang512.github.io/FastGDA

详情

展开后加载摘要…

URL PDF HTML 收藏
2511.01093 2025-11-04 cs.LG cs.AI 82%

Continual Learning, Not Training: Online Adaptation For Agents

Aman Jaglan, Jarrod Barnes

机构 * Arc Intelligence

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

Comments 12 pages, 4 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2506.23068 2025-10-28 cs.LG cs.AI stat.AP 82%

Curious Causality-Seeking Agents Learn Meta Causal World

Zhiyu Zhao, Haoxuan Li, Haifeng Zhang, Jun Wang, Francesco Faccio, Jürgen Schmidhuber, Mengyue Yang

机构 * University of Bristol(布里斯托大学) Peking University(北京大学) Institute of Automation, Chinese Academy of Sciences(中国科学院自动化研究所) School of Artificial Intelligence, Chinese Academy of Sciences(中国科学院人工智能学院) University College London(伦敦大学学院) King Abdullah University of Science and Technology(卡塔尔科技大学) The Swiss AI Lab, IDSIA-USI/SUPSI(瑞士AI实验室,IDSIA-USI/SUPSI)

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

Comments 30 pages

详情

展开后加载摘要…

URL PDF HTML 收藏
2510.00406 2025-10-02 cs.RO cs.CV 82%

VLA-RFT: Vision-Language-Action Reinforcement Fine-tuning with Verified Rewards in World Simulators

Hengtao Li, Pengxiang Ding, Runze Suo, Yihao Wang, Zirui Ge, Dongyuan Zang, Kexian Yu, Mingyang Sun, Hongyin Zhang, Donglin Wang, Weihua Su

机构 * Westlake University(西湖大学) Zhejiang University(浙江大学) OpenHelix Team(OpenHelix团队) Fudan University(复旦大学) Zhengzhou University(郑州大学) BUPT(北京邮电大学) Hebei University of Technology(河北工业大学)

专题命中 通用世界模型 :world model(abstract);world-model(abstract);world model(abstract);world-model(abstract)

详情

展开后加载摘要…

URL PDF HTML 收藏
2509.13341 2025-09-30 cs.AI cs.LG 82%

Imagined Autocurricula

Ahmet H. Güzel, Matthew Thomas Jackson, Jarek Luca Liesen, Tim Rocktäschel, Jakob Nicolaus Foerster, Ilija Bogunovic, Jack Parker-Holder

机构 * University College London AI Centre(伦敦大学学院人工智能中心) University of Oxford(牛津大学)

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

详情

展开后加载摘要…

URL PDF HTML 收藏
2509.19555 2025-09-25 cs.RO cs.LG 82%

AnySafe: Adapting Latent Safety Filters at Runtime via Safety Constraint Parameterization in the Latent Space

Sankalp Agrawal, Junwon Seo, Kensuke Nakamura, Ran Tian, Andrea Bajcsy

机构 * The Ohio State University(俄亥俄州立大学) Carnegie Mellon University(卡内基梅隆大学) UC Berkeley(加州大学伯克利分校) NVIDIA Research(NVIDIA研究)

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

详情

展开后加载摘要…

URL PDF HTML 收藏
2505.00779 2025-09-25 cs.RO cs.LG cs.SY eess.SY 82%

Uncertainty-aware Latent Safety Filters for Avoiding Out-of-Distribution Failures

Junwon Seo, Kensuke Nakamura, Andrea Bajcsy

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

Comments Conference on Robot Learning (CoRL 2025)

详情

展开后加载摘要…

URL PDF HTML 收藏
2509.11959 2025-09-16 cs.CV cs.RO 82%

Learning to Generate 4D LiDAR Sequences

Ao Liang, Youquan Liu, Yu Yang, Dongyue Lu, Linfeng Li, Lingdong Kong, Huaici Zhao, Wei Tsang Ooi

机构 * NUS(国立新加坡大学) UCAS(中国科学院大学) SIA, CAS(中国科学院上海自动化研究所) FDU(福建大学) ZJU(浙江大学)

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

Comments Abstract Paper (Non-Archival) @ ICCV 2025 Wild3D Workshop; GitHub Repo at https://lidarcrafter.github.io/

详情

展开后加载摘要…

URL PDF HTML 收藏
2504.15485 2025-08-15 cs.CV cs.AI cs.CL 82%

CAPTURe: Evaluating Spatial Reasoning in Vision Language Models via Occluded Object Counting

Atin Pothiraj, Elias Stengel-Eskin, Jaemin Cho, Mohit Bansal

机构 * UNC Chapel Hill(北卡罗来纳大学教堂山分校)

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

Comments ICCV 2025

详情

展开后加载摘要…

URL PDF HTML 收藏
2507.16038 2025-07-23 cs.CV cs.AI 82%

Discovering and using Spelke segments

Rahul Venkatesh, Klemen Kotar, Lilian Naing Chen, Seungwoo Kim, Luca Thomas Wheeler, Jared Watrous, Ashley Xu, Gia Ancone, Wanhee Lee, Honglin Chen, Daniel Bear, Stefan Stojanov, Daniel Yamins

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

Comments Project page at: https://neuroailab.github.io/spelke_net

详情

展开后加载摘要…

URL PDF HTML 收藏
2506.18701 2025-06-24 cs.CV cs.AI 82%

Matrix-Game: Interactive World Foundation Model

Yifan Zhang, Chunli Peng, Boyang Wang, Puyi Wang, Qingcheng Zhu, Fei Kang, Biao Jiang, Zedong Gao, Eric Li, Yang Liu, Yahui Zhou

机构 * Skywork AI

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

Comments Technical Report

详情

展开后加载摘要…

URL PDF HTML 收藏
2410.13569 2025-06-04 cs.LG cs.CV 82%

Learning on Model Weights using Tree Experts

Eliahu Horwitz, Bar Cavia, Jonathan Kahana, Yedid Hoshen

机构 * The Hebrew University of Jerusalem(希伯来大学)

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

Comments CVPR 2025. Project page: https://horwitz.ai/probex/

详情

展开后加载摘要…

URL PDF HTML 收藏
2505.14396 2025-05-21 cs.AI cs.CL cs.LG 82%

Causal Cartographer: From Mapping to Reasoning Over Counterfactual Worlds

Gaël Gendron, Jože M. Rožanec, Michael Witbrock, Gillian Dobbie

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

Comments 29 pages, 9 pages for the main paper, 20 pages for the references and appendix, 25 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2407.11249 2025-03-04 cs.LG cs.AI q-bio.NC stat.ML 82%

Disentangling Representations through Multi-task Learning

Pantelis Vafidis, Aman Bhargava, Antonio Rangel

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

Comments 43 pages, 17 figures

Journal ref International Conference on Learning Representations, 2025 https://openreview.net/forum?id=yVGGtsOgc7

详情

展开后加载摘要…

URL PDF HTML 收藏
2409.16824 2025-02-20 cs.LG cs.AI 82%

Uncertainty Representations in State-Space Layers for Deep Reinforcement Learning under Partial Observability

Carlos E. Luis, Alessandro G. Bottero, Julia Vinogradska, Felix Berkenkamp, Jan Peters

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

Comments TMLR 2025

详情

展开后加载摘要…

URL PDF HTML 收藏
2502.03072 2025-02-06 cs.RO cs.CV 82%

RoboGrasp: A Universal Grasping Policy for Robust Robotic Control

Yiqi Huang, Travis Davies, Jiahuan Yan, Xiang Chen, Yu Tian, Luhui Hu

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

详情

展开后加载摘要…

URL PDF HTML 收藏
2403.15698 2024-12-18 cs.CV cs.AI 82%

SceneX: Procedural Controllable Large-scale Scene Generation

Mengqi Zhou, Yuxi Wang, Jun Hou, Shougao Zhang, Yiwei Li, Chuanchen Luo, Junran Peng, Zhaoxiang Zhang

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

详情

展开后加载摘要…

URL PDF HTML 收藏
2409.06445 2024-10-21 cs.CV cs.AI 82%

Learning Generative Interactive Environments By Trained Agent Exploration

Naser Kazemi, Nedko Savov, Danda Paudel, Luc Van Gool

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

详情

展开后加载摘要…

URL PDF HTML 收藏
2408.08845 2024-08-19 stat.ML cs.LG 82%

Shapley Marginal Surplus for Strong Models

Daniel de Marchi, Michael Kosorok, Scott de Marchi

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

详情

展开后加载摘要…

URL PDF HTML 收藏
2407.20806 2024-07-31 cs.AI cs.LG 82%

ARCLE: The Abstraction and Reasoning Corpus Learning Environment for Reinforcement Learning

Hosung Lee, Sejin Kim, Seungpil Lee, Sanha Hwang, Jihwan Lee, Byung-Jun Lee, Sundong Kim

专题命中 通用世界模型 :world model(abstract);world models(abstract);world model(abstract);world models(abstract)

Comments Accepted by CoLLAs 2024, Project page: https://github.com/confeitoHS/arcle

详情

展开后加载摘要…

URL PDF HTML 收藏