arXivDaily arXiv每日学术速递 周一至周五更新
arXiv周末暂无论文更新,休息一下吧,周末愉快~~

视觉与机器人

多模态信息融合

面向图像、视频、多传感器和跨模态感知的信息融合,包括 Image Fusion、红外可见光、遥感、医学影像、LiDAR/雷达/相机和音视频融合。

2026-03-27 至 2026-03-27 共收录 4 信号源:cs.CV, eess.IV, eess.SP, cs.RO, cs.MM

1. 通用Image Fusion 1 篇

2603.25555 2026-03-27 cs.CV 84%

Towards Comprehensive Real-Time Scene Understanding in Ophthalmic Surgery through Multimodal Image Fusion

通过多模态图像融合实现眼科手术中的全面实时场景理解

Nikolo Rohrmoser, Ghazal Ghazaei, Michael Sommersperger, Nassir Navab

机构 * Technical University of Munich(慕尼黑工业大学) Carl Zeiss AG(卡尔蔡司公司)

专题命中 通用Image Fusion :image fusion(title);multimodal image fusion(title);分类 cs.CV

AI总结 本文提出一种多模态实时网络架构,用于联合仪器检测、关键点定位和工具-组织距离估计,通过多模态图像融合提升手术场景理解的准确性和实时性。

详情

展开后加载摘要…

URL PDF HTML 收藏

2. 遥感融合与全色锐化 1 篇

2601.08750 2026-03-27 cs.CL 50%

A Geolocation-Aware Multimodal Approach for Ecological Prediction

一种面向地理定位的多模态方法用于生态预测

Valerie Zermatten, Chiara Vanalli, Gencer Sumbul, Diego Marcos, Devis Tuia

机构 * ECEO, Ecole Polytechnique Fédérale de Lausanne (EPFL)(ECEO,洛桑联邦理工学院(EPFL)) INRIA, University of Montpellier(法国国家信息与自动化研究所(INRIA),蒙彼利埃大学)

专题命中 遥感融合与全色锐化 :multimodal fusion(abstract)

AI总结 本文提出GAMMA方法,通过显式空间上下文融合异构生态数据,提升环境预测性能,并展示其在大规模环境制图和生物多样性监测中的潜力。

Comments under review

详情

展开后加载摘要…

URL PDF HTML 收藏

3. 音视频/视觉语言融合 1 篇

2512.11331 2026-03-27 cs.IT math.IT 67%

AMBER: An Adaptive Multimodal Mask Transformer for Beam Prediction with Missing Modalities

AMBER: 一种自适应多模态掩码变换器用于缺失模态的波束预测

Chenyiming Wen, Binpu Shi, Min Li, Ming-Min Zhao, Min-Jian Zhao, Jiangzhou Wang

专题命中 音视频/视觉语言融合 :multimodal fusion(abstract);feature-level fusion(abstract)

AI总结 AMBER通过自适应处理多模态数据中的缺失模态问题,提升波束预测的鲁棒性和准确性,实验表明其在真实世界数据集上优于现有多模态学习基线。

Comments 13 pages, 9 figures

详情

展开后加载摘要…

URL PDF HTML 收藏

4. 融合架构与评测 1 篇

2603.24636 2026-03-27 cs.LG cs.AI 50%

DyMRL: Dynamic Multispace Representation Learning for Multimodal Event Forecasting in Knowledge Graph

DyMRL: 动态多空间表征学习用于知识图谱中的多模态事件预测

Feng Zhao, Kangzheng Liu, Teng Peng, Yu Yang, Guandong Xu

机构 * Huazhong University of Science and Technology(华中科技大学) Centre for Learning, Teaching and Technology(学习、教学与技术中心) The Education University of Hong Kong(香港教育大学)

专题命中 融合架构与评测 :multimodal fusion(abstract)

AI总结 DyMRL通过动态多空间表征学习,解决多模态知识动态获取与融合问题,提升事件预测性能。

Comments Accepted to The ACM Web Conference 2026 (WWW '26). This version is published under a CC BY license

详情

展开后加载摘要…

URL PDF HTML 收藏