arXivDaily arXiv每日学术速递 周一至周五更新

视觉与机器人

机器人 / 具身智能

机器人、具身智能、机器人学习、操作、导航和具身世界模型。

2026-05-11 至 2026-05-11 共收录 79 信号源:cs.RO, cs.AI, cs.CV, cs.LG

1. 机器人数据与评测 18 篇

2605.02881 2026-05-11 cs.RO 70%

MolmoAct2: Action Reasoning Models for Real-world Deployment

MolmoAct2:面向现实部署的动作推理模型

Haoquan Fang, Jiafei Duan, Donovan Clay, Sam Wang, Shuo Liu, Weikai Huang, Xiang Fan, Wei-Chuan Tsai, Shirui Chen, Yi Ru Wang, Shanli Xing, Jaemin Cho, Jae Sung Park, Ainaz Eftekhar, Peter Sushko, Karen Farley, Angad Wadhwa, Cole Harrison, Winson Han, Ying-Chun Lee, Eli VanderBilt, Rose Hendrix, Suveen Ellawela, Lucas Ngoo, Joyce Chai, Zhongzheng Ren, Ali Farhadi, Dieter Fox, Ranjay Krishna

机构 * Allen Institute for AI(艾伦人工智能研究所) University of Washington(华盛顿大学) National University of Singapore(新加坡国立大学) University of Pennsylvania(宾夕法尼亚大学) Johns Hopkins University(约翰霍普金斯大学) Amazon(亚马逊公司) University of Michigan(密歇根大学) University of North Carolina at Chapel Hill(北卡罗来纳大学教堂山分校)

专题命中 机器人数据与评测 :robotics(abstract,abstract_cn);分类 cs.RO

AI总结 本文提出MolmoAct2,一个完全开放的动作推理模型,通过改进架构和引入新数据集,在五个方面提升性能,展示了在多个基准测试中优于现有模型的成果。

Comments 31 pages, project page: https://allenai.org/blog/molmoact2

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.08084 2026-05-11 cs.RO cs.CV 62%

123D: Unifying Multi-Modal Autonomous Driving Data at Scale

123D:规模化统一多模态自动驾驶数据

Daniel Dauner, Valentin Charraut, Bastian Berle, Tianyu Li, Long Nguyen, Jiabao Wang, Changhui Jing, Maximilian Igl, Holger Caesar, Boris Ivanovic, Yiyi Liao, Andreas Geiger, Kashyap Chitta

机构 * KE:SAI University of Tübingen(图宾根大学) Tübingen AI Center(图宾根人工智能中心) NVIDIA Research(NVIDIA研究) Valeo Brain(法雷奥大脑) OpenDriveLab at Shanghai Innovation Institute(上海创新研究院自动驾驶实验室) Zhejiang University(浙江大学) Delft University of Technology(代尔夫特理工大学)

专题命中 机器人数据与评测 :robotics(abstract);分类 cs.RO、cs.CV

AI总结 123D通过单一API统一多模态自动驾驶数据,解决数据碎片化、同步难题,并提供分析工具,支持跨数据集3D目标检测和强化学习规划应用。

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.07675 2026-05-11 cs.AI cs.LG 62%

FactoryBench: Evaluating Industrial Machine Understanding

FactoryBench:评估工业机器理解的基准测试

Yanis Merzouki, Coral Izquierdo, Matei Ignuta-Ciuncanu, Marcos Gomez-Bracamonte, Riccardo Maggioni, Alessandro Lombardi, Camilla Mazzoleni, Federico Martelli, Balazs Gunther, Jonas Petersen, Philipp Petersen

机构 * ETH Zurich(苏黎世联邦理工学院) Forgis UC3M Imperial College London(帝国理工学院伦敦分校) University of Berkeley(伯克利大学) KTH Royal Institute of Technology(皇家理工学院) University of Vienna(维也纳大学)

专题命中 机器人数据与评测 :robotic(abstract);分类 cs.AI、cs.LG

AI总结 本文提出FactoryBench基准测试,用于评估时间序列模型和LLM在工业机器人 telemetry 中的机器理解能力,通过四个因果层次和五种答案格式评估,包含70k问题-答案对,揭示当前模型与实际操作理解之间的差距。

Comments 9 pages, 4 figures, 14 tables; appendix with 24 pages

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.06815 2026-05-11 cs.AI cs.CV 62%

Uneven Evolution of Cognition Across Generations of Generative AI Models

不同世代生成式AI模型认知能力的不均衡发展

Isaac Galatzer-Levy, Daniel McDuff, Xin Liu, Jed McGiffin

机构 * Google DeepMind(谷歌DeepMind) Google Research(谷歌研究) University of Washington(华盛顿大学)

专题命中 机器人数据与评测 :manipulation(abstract);分类 cs.AI、cs.CV

AI总结 本文通过心理测量框架评估生成式AI的认知特征,发现其在语言抽象推理方面发展迅速,而视觉感知组织能力停滞,表明架构偏倚影响认知平衡发展。

Comments 25 pages, 5 Figures, 3 Tables

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.07550 2026-05-11 cs.CV 57%

Mind the Gap: Geometrically Accurate Generative Reconstruction from Disjoint Views

注意间隙:从不重叠视角进行几何准确的生成重建

Grzegorz Wilczynski, Mikołaj Zielinski, Bartosz Świrta, Dominik Belter, Przemysław Spurek

机构 * Jagiellonian University(雅盖隆大学) IDEAS Research Institute(IDEAS研究机构) Poznań University of Technology(波兹南技术大学) Warsaw University of Technology(华沙技术大学)

专题命中 机器人数据与评测 :robotics(abstract);分类 cs.CV

AI总结 本文提出了一种新的生成重建范式,针对不重叠视角下的几何重建问题,提出GLADOS框架,通过生成桥梁、鲁棒粗重建和迭代上下文扩展优化,解决传统方法在零重叠场景下的失败问题。

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.02357 2026-05-11 cs.CV 57%

Channel-Level Relation to Attentive Aggregation with Neighborhood-Homogeneity Constraint for Point Cloud Analysis

通道级关系与具有邻域同质性约束的注意聚合在点云分析中的应用

Jiaqi Shi, Jin Xiao, Xiaoguang Hu, Wenxuan Ji, Zichong Jia, Zifan Long, Tianyou Chen, Baochang Zhang

机构 * 1School of Automation Science Electrical Engineering, Beihang University, Beijing, China 2Wuhan Leaddo Measuring \& Control Technology, Wuhan, China 3School of Artificial Intelligence, Beihang University, Beijing, China Emails

专题命中 机器人数据与评测 :embodied AI(abstract);分类 cs.CV

AI总结 本文提出PointCRA网络,通过引入时间趋势变化作为新评估维度,解决现有空间和通道注意机制中权重维度坍缩导致的信息丢失问题,提升点云分析的精度与效率。

详情

展开后加载摘要…

URL PDF HTML 收藏
2602.04939 2026-05-11 cs.CV 57%

SynthForensics: Benchmarking and Evaluating People-Centric Synthetic Video Deepfakes

SynthForensics:以人为中心的合成视频深度伪造基准测试与评估

Roberto Leotta, Salvatore Alfio Sambataro, Claudio Vittorio Ragaglia, Mirko Casu, Yuri Petralia, Francesco Guarnera, Luca Guarnera, Sebastiano Battiato

机构 * iCTLab s.r.l.(iCTLab公司) University of Catania(卡塔尼亚大学)

专题命中 机器人数据与评测 :manipulation(abstract);分类 cs.CV

AI总结 本文提出SynthForensics基准测试,评估合成视频深度伪造的可检测性,通过20445个视频数据集验证了人类和算法在识别合成视频中的性能差异。

详情

展开后加载摘要…

URL PDF HTML 收藏
2510.01105 2026-05-11 cs.LG 57%

Geometric Analysis of Neural Regression Collapse via Intrinsic Dimension

神经回归崩溃的几何分析:通过内在维度

George Andriopoulos, Zixuan Dong, Bimarsha Adhikari, Keith Ross

机构 * New York University Abu Dhabi(纽约大学阿布扎比分校) SFSC of AI and DL, NYU Shanghai(纽约大学上海人工智能与深度学习学院) New York University(纽约大学)

专题命中 机器人数据与评测 :robotics(abstract);分类 cs.LG

AI总结 研究通过内在维度分析揭示神经回归崩溃的几何机制,发现过度压缩导致泛化能力下降,提出扩展或减少特征维度的策略以提升性能。

Comments 36 pages, 21 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2501.09209 2026-05-11 cs.CV 57%

Surgical Visual Understanding (SurgVU) Dataset

外科视觉理解(SurgVU)数据集

Aneeq Zia, Max Berniker, Rogerio Nespolo, Xiaorui Zhang, Conor Perreault, Ziheng Wang, Benjamin Mueller, Ryan Schmidt, Kiran Bhattacharyya, Xi Liu, Anthony Jarc

机构 * Intuitive Surgical

专题命中 机器人数据与评测 :robotic(abstract);分类 cs.CV

AI总结 本文介绍了用于外科数据科学的基础研究的大型外科视频数据集,包含视频及标注,展示了数据收集方法和独特属性,并提出了多个示例问题,旨在推动机器学习领域在手术数据科学中的应用。

详情

展开后加载摘要…

URL PDF HTML 收藏
2403.18149 2026-05-11 cs.RO cs.SY eess.SY math.OC 57%

Code Generation and Conic Constraints for Model-Predictive Control on Microcontrollers with Conic-TinyMPC

基于锥约束的模型预测控制与代码生成:适用于微控制器的Conic-TinyMPC

Ishaan Mahajan, Khai Nguyen, Sam Schoedel, Elakhya Nedumaran, Moises Mata, Brian Plancher, Zachary Manchester

机构 * School of Engineering and Applied Science, Columbia University(哥伦比亚大学工程与应用科学学院) Carnegie Mellon University(卡内基梅隆大学) Massachusetts Institute of Technology(麻省理工学院) Barnard College, Columbia University and Dartmouth College(哥伦比亚大学巴纳德学院和达特茅斯学院)

专题命中 机器人数据与评测 :robotic(abstract);分类 cs.RO

AI总结 本文提出一种适用于微控制器的模型预测控制方法,通过支持二次锥约束和自动生成C++代码,显著提升了嵌入式系统的求解速度和问题规模。

Comments Accepted to ICRA 2026. 4 Figures. 2 Tables. First three authors contributed equally

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.07388 2026-05-11 cs.CV 57%

A Marine Debris Detection Framework for Ocean Robots via Self-Attention Enhancement and Feature Interaction Optimization

面向海洋机器人的海洋垃圾检测框架:通过自注意力增强与特征交互优化

Yuyang Li, Jiashu Han, Yinyi Lai, Wenbin Kang, Zenghui Liu

机构 * Hefei Institutes of Physical Science, Chinese Academy of Sciences(中国科学院合肥物质科学研究院)

专题命中 机器人数据与评测 :robotic(abstract);分类 cs.CV

AI总结 本文提出YOLO-MD框架,通过自注意力增强模块和轻量级位移操作提升海洋垃圾检测性能,实验表明在UODM数据集上取得优异精度和F1分数。

详情

展开后加载摘要…

URL PDF HTML 收藏
2604.24136 2026-05-11 cs.CV eess.IV 57%

Bridging Restoration and Generation Manifolds in One-Step Diffusion for Real-World Super-Resolution

连接恢复与生成流形的单步扩散在现实世界超分辨率中的应用

Shyang-En Weng, Yi-Cheng Liao, Yu-Syuan Xu, Wei-Chen Chiu, Ching-Chun Huang

机构 * National Yang Ming Chiao Tung University, Hsinchu, Taiwan MediaTek Inc., Taiwan

专题命中 机器人数据与评测 :navigation(abstract);分类 cs.CV

AI总结 本文提出IDaS-SR框架,通过Manifold Inversion Noise Estimator和CHARIOT机制,解决单步扩散中恢复与生成流形的匹配问题,提升现实世界超分辨率的性能。

详情

展开后加载摘要…

URL PDF HTML 收藏
2604.24091 2026-05-11 cs.DC 50%

Unfolding an Atomistic World: Atomistic Simulation of Reactor Pressure Vessel Steel Across Year-and-Meter Scales

揭示原子世界:反应堆压力容器钢的原子模拟跨越年和米尺度

Haozhi Han, Ruge Zhang, Haoquan Chen, Yifeng Chen, Haipeng Jia, Liang Yuan, Yunquan Zhang, Ting Cao, Yunxin Liu, Ya-Qin Zhang, Kun Li

专题命中 机器人数据与评测 :world model(abstract)

AI总结 本文提出AtomWorld框架,通过算法、HPC和应用三层协同,实现反应堆压力容器钢在年和米尺度的原子模拟,首次达到十夸脱原子系统的模拟规模,时间效率达1.71天/服务年。

详情

展开后加载摘要…

URL PDF HTML 收藏

2. 其他机器人 6 篇

2605.07764 2026-05-11 cs.RO 79%

CommandSwarm: Safety-Aware Natural Language-to-Behavior-Tree Generation for Robotic Swarms

CommandSwarm: 为机器人群体提供安全意识的自然语言到行为树生成

Mohammed Majid, Amjad Yousef Majid

专题命中 其他机器人 :robotic(title);robotics(abstract);分类 cs.RO

AI总结 本文提出CommandSwarm系统,通过多语言翻译、安全过滤和约束提示生成XML行为树,验证了紧凑量化领域适应的LLM在机器人群体控制中的有效性,强调了解析器接受和安全过滤的重要性。

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.07530 2026-05-11 cs.RO cs.SE 74%

Search-based Robustness Testing of Laptop Refurbishing Robotic Software

基于搜索的笔记本电脑翻新机器人软件鲁棒性测试

Erblin Isaku, Hassan Sartaj, Shaukat Ali, Malaika Din Hashmi, Francois Picard

机构 * Simula Research Laboratory(Simula研究实验室) University of Oslo(奥斯陆大学) Danish Technological Institute(丹麦技术研究所)

专题命中 其他机器人 :robotic(title);分类 cs.RO

AI总结 本文提出PROBE方法,利用多目标优化寻找最小局部扰动以暴露笔记本翻新机器人软件中物体检测模型的缺陷,验证其在生成失效诱导扰动方面的有效性。

Comments 15 pages, 4 figures, 5 tables

详情

展开后加载摘要…

URL PDF HTML 收藏
2512.17129 2026-05-11 cs.LG cs.MA cs.RO q-bio.QM 62%

DiffeoMorph: Learning to Morph 3D Shapes Using Differentiable Agent-Based Simulations

DiffeoMorph: 通过可微分基于代理的模拟学习3D形状变形

Seong Ho Pahng, Guoye Guan, Benjamin Fefferman, Sahand Hormoz

机构 * Department of Systems Biology, Harvard Medical School(哈佛医学院系统生物学系) Department of Data Science, Dana-Farber Cancer Institute(达纳-法伯癌症研究所数据科学部) Departments of Biomedical Informatics, Harvard Medical School(哈佛医学院生物医学信息学部) Broad Institute of MIT and Harvard(MIT与哈佛大学Broad研究所)

专题命中 其他机器人 :robotics(abstract);分类 cs.RO、cs.LG

AI总结 本文提出DiffeoMorph框架,通过可微分代理模拟学习形态发生协议,使代理群体变形为目标3D形状,采用SE(3)等价图神经网络和基于3DZernike多项式的形状匹配损失实现旋转不变性和反射敏感性。

详情

展开后加载摘要…

URL PDF HTML 收藏
2510.07625 2026-05-11 cs.RO cs.SY eess.SY 57%

GATO: GPU-Accelerated and Batched Trajectory Optimization for Scalable Edge Model Predictive Control

GATO:用于可扩展边缘模型预测控制的GPU加速和批处理轨迹优化

Alexander Du, Emre Adabag, Gabriel Bravo-Palacios, Brian Plancher

机构 * School of Engineering and Applied Science, Columbia University(哥伦比亚大学工程与应用科学学院) University of Michigan(密歇根大学) Barnard College, Columbia University and Dartmouth College(哥伦比亚大学巴纳德学院和达特茅斯学院)

专题命中 其他机器人 :robotics(abstract);分类 cs.RO

AI总结 GATO通过算法、软件和计算硬件的协同设计,实现对中等批量大小的实时轨迹优化,提升边缘模型预测控制的性能。

Comments Accepted to ICRA 2026. 8 pages, 8 figures, 2 tables

详情

展开后加载摘要…

URL PDF HTML 收藏
2510.04839 2026-05-11 cs.RO 57%

TAG-K: Tail-Averaged Greedy Kaczmarz for Computationally Efficient and Performant Online Inertial Parameter Estimation

TAG-K:尾部平均贪心Kaczmarz用于计算高效且性能优异的在线惯性参数估计

Shuo Sha, Anupam Bhakta, Zhenyuan Jiang, Kevin Qiu, Ishaan Mahajan, Gabriel Bravo-Palacios, Brian Plancher

机构 * School of Applied Science, Columbia University(哥伦比亚大学应用科学学院) Columbia College, Columbia University(哥伦比亚大学哥伦比亚学院) Barnard College, Columbia University and Dartmouth College(哥伦比亚大学巴纳德学院和达特茅斯学院)

专题命中 其他机器人 :robotic(abstract);分类 cs.RO

AI总结 本文提出TAG-K算法,结合贪心随机行选择和尾部平均,实现高效稳定的在线惯性参数估计,在计算受限的机器人系统中表现出更快的求解速度和更高的鲁棒性。

Comments Accepted to ICRA 2026. 3 Figures. 3 Tables

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.07030 2026-05-11 cs.CE physics.app-ph 50%

Scalable Active Metamaterials for Shape-Morphing

可扩展的主动超材料用于形状变形

Jipeng Cui, Wei "Wayne" Chen

专题命中 其他机器人 :robotics(abstract)

AI总结 本文提出一种可扩展的主动超材料设计框架,通过分层分解实现快速准确的非周期性形状变形超材料设计,为可编程材料系统提供新计算范式。

详情

展开后加载摘要…

URL PDF HTML 收藏