arXivDaily arXiv每日学术速递 周一至周五更新

AI 大模型

多模态大模型

跨文本、图像、视频、音频等模态的大模型与学习方法。

共收录 4874 信号源:cs.CV, cs.CL, cs.AI, cs.MM, eess.AS

1. 其他多模态 4874 篇

2602.01449 2026-05-25 math.NA cs.NA math.PR stat.ML 78%

Dimension-Free Multimodal Sampling via Preconditioned Annealed Langevin Dynamics

无维度多模态采样:基于预处理退火朗之万动力学

Lorenzo Baldassari, Josselin Garnier, Knut Solna, Maarten V. de Hoop

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 针对函数空间问题有限维近似细化下保持稳定的多模态目标采样算法,提出预处理退火朗之万动力学,在谱条件下实现维度一致的时间复杂度内的高斯混合目标采样。

Comments ICML 2026

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.21935 2026-05-22 cs.RO 78%

Learning to Evolve: Multi-modal Interactive Fields for Robust Humanoid Navigation in Dynamic Environments

学习进化:多模态交互场用于动态环境中的稳健双足机器人导航

Peifeng Jiang, Hong Liu, Jin Jin, Wenshuai Wang, Xia Li

机构 * State Key Laboratory of General Artificial Intelligence, Peking University, Shenzhen Graduate School(一般人工智能国家重点实验室,北京大学深圳研究生院) Oxford Robotics Institute, University of Oxford(牛津大学机器人研究所) Institute for Machine Learning, Department of Computer Science, ETH Zurich(苏黎世联邦理工学院计算机科学系机器学习研究所)

专题命中 其他多模态 :multi-modal(title,abstract)

AI总结 本文提出多模态交互场(MIF)系统,通过结合置信度感知的语义3D高斯溅射、差异触发的空间记忆更新和任务驱动的几何重建,在闭环感知-适应管道中实现稳健的双足机器人导航,显著提高了非静态环境中的重定位成功率并减少了语义内存足迹。

Comments Accepted by Robotics: Science and Systems 2026

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.21565 2026-05-22 cs.LG 78%

Leveraging Self-Paced Curriculum Learning for Enhanced Modality Balance in Multimodal Conversational Emotion Recognition

通过自适应课程学习提升多模态对话情感识别的模态平衡

Phuong-Anh Nguyen, The-Son Le, Duc-Trong Le, Cam-Van Thi Nguyen

机构 * VNU University of Engineering and Technology(越南工程大学)

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 本文提出基于自适应课程学习的框架,通过双层难度评估器解决多模态对话情感识别中的模态不均衡问题,实验表明该方法在IEMOCAP和MELD数据集上显著提升了模型性能。

Comments Accepted at Neural Computing and Applications (Springer), 2026

详情

展开后加载摘要…

URL PDF HTML 收藏
2410.19653 2026-05-15 cs.LG 78%

Conformal Prediction for Multimodal Regression

多模态回归的符合预测

Alexis Bose, Jonathan Ethier, Paul Guinand

机构 * Communications Research Centre Canada(加拿大通讯研究中心)

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 本文提出多模态符合回归,通过内部特征提取实现对图像和文本等多模态数据的预测区间构造,拓展了符合预测的应用范围。

Comments Code available at https://github.com/ic-crc/uncertainty-estimation 20 pages, 34 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.14917 2026-05-15 cs.LG cs.CE cs.IT math.IT stat.ML 78%

A Mutual Information Lower Bound for Multimodal Regression Active Learning

多模态回归主动学习的互信息下界

Leonardo Ferreira Guilhoto, Akshat Kaushal, Paris Perdikaris

机构 * Graduate Group on Applied Mathematics & Computational Science(应用数学与计算科学研究生组) Department of Computer and Information Science(计算机与信息科学系) University of Pennsylvania(宾夕法尼亚大学) Department of Mechanical Engineering and Applied Mechanics(机械工程与应用力学系)

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 本文提出多模态回归主动学习的互信息下界方法,通过两个索引框架区分epistemic和aleatoric不确定性,证明其在数据集增长时趋于零,且在多模态系统基准中优于其他基线方法。

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.13417 2026-05-14 physics.ao-ph 78%

State-resolved multimodal contributions to stratospheric polar vortex predictability

基于状态解析的多模式对平流层极涡可预测性的贡献

Shuo Yang, Dan Zhao, Tingting Xue, Chunhua Zeng, Yongwen Zhang, Xiaosong Chen

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 本文基于状态解析框架,利用厄拉五数据和特征微状态理论,揭示了平流层极涡可预测性主要由平流层状态的持续性和更高阶结构及对流层变异性共同决定,为改进亚季节到季节预报提供了物理可解释路径。

Comments 16 pages, 4 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.11919 2026-05-13 cs.LG 78%

STAGE: Tackling Semantic Drift in Multimodal Federated Graph Learning

STAGE:应对多模态联邦图学习中的语义漂移

Zekai Chen, Xun Wu, Xunkai Li, Yihan Sun, Rong-Hua Li, Guoren Wang

机构 * Beijing Institute of Technology(北京理工大学) Minzu University of China(民族大学)

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 STAGE提出一种协议优先框架,通过构建共享语义空间解决多模态联邦图学习中的语义漂移问题,提升跨客户端语义校准并减少图学习中的不一致性风险。

详情

展开后加载摘要…

URL PDF HTML 收藏
2509.21711 2026-05-13 stat.ML cs.LG 78%

Multi-modal Bayesian Neural Network Surrogates with Conjugate Last-Layer Estimation

多模态贝叶斯神经网络代理模型与共轭最后一层估计

Ian Taylor, Juliane Mueller, Julie Bessac

机构 * National Laboratory of the Rockies(落基山脉国家实验室)

专题命中 其他多模态 :multi-modal(title,abstract)

AI总结 本文提出两种多模态贝叶斯神经网络代理模型,利用共轭分布估计参数,提升多模态数据下标量和时间序列的预测精度与不确定性量化。

Comments 47 pages including references and appendix, 9 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2604.19503 2026-05-12 cs.DC 78%

ReaLB: Real-Time Load Balancing for Multimodal MoE Inference

ReaLB:多模态MoE推理的实时负载均衡

Yingping Wang, Yi Wu, Xiangyu Wu, Junwei Cui, Weilin Cai, Zhijiang Guo, Jiayi Huang

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 ReaLB通过实时调整MoE专家计算精度,提升多模态模型推理效率,减少负载不平衡,实现1.10-1.32倍的端到端加速,同时保持1%以内的精度损失。

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.05823 2026-05-08 math.DS math.CV 78%

Blaschke-type models for multimodal circle maps

多模圆映射的Blaschke型模型

Edson de Faria, Welington de Melo, Pedro A. S. Salomão, Edson Vargas

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 本文构造了多模圆映射的Blaschke型理性映射族,证明了满足自然动力学条件的多模圆映射与该族中的映射拓扑共轭,并证明该实现唯一性。

Comments 24 pages, 2 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.01198 2026-05-05 stat.CO stat.ME 78%

Modular Markov chain Monte Carlo with application to multimodal sampling

模块化马尔可夫链蒙特卡洛方法及其在多模采样中的应用

Joonha Park

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 本文提出模块化MCMC方法,通过并行构建约束于目标空间子集的马尔可夫链,结合加权估计以减少方差,应用于多模分布的采样,提升温控方法的效率。

详情

展开后加载摘要…

URL PDF HTML 收藏
2604.07692 2026-04-30 cs.LG 78%

Tree-of-Evidence: Efficient "System 2" Search for Faithful Multimodal Grounding

证据树:高效的'系统2'搜索用于忠实的多模态接地

Micky C. Nnamdi, Benoit L. Marteau, Yishan Zhong, J. Ben Tamo, May D. Wang

机构 * Georgia Institute of Technology(佐治亚理工学院)

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 本文提出Tree-of-Evidence算法,通过离散优化问题实现多模态模型的可解释性,通过证据瓶颈和束搜索生成可审计的证据集,保留高预测性能并提升决策一致性。

Journal ref ACL 2026 Findings

详情

展开后加载摘要…

URL PDF HTML 收藏
2510.10708 2026-04-29 hep-ph astro-ph.CO hep-th 78%

Multimodal axion emissions from Abelian-Higgs cosmic strings

从阿贝尔-希格斯宇宙弦中产生多模轴子

Naoya Kitajima, Michiru Uwabo-Niibo

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 研究通过宇宙弦碰撞产生轴子,发现低能和高能区域均有轴子发射,其中低能轴子可解释冷暗物质,高能轴子可作为暗辐射,GeV级轴子可解释暗物质丰度并预测可观测暗辐射。

Comments v2: 8 pages, 8 figures; updated to match the version accepted for publication in PRD

详情

展开后加载摘要…

URL PDF HTML 收藏
2508.07555 2026-04-28 cs.LG cs.IT cs.NI math.IT 78%

Multimodal Remote Inference

多模态远程推断

Keyuan Zhang, Yin Sun, Bo Ji

机构 * Department of Computer Science, Virginia Tech(弗吉尼亚理工大学计算机科学系) Department of Electrical and Computer Engineering, Auburn University(阿伯伯大学电气与计算机工程系)

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 本文研究多模态远程推断系统,通过优化调度减少机器学习模型的推断误差,提出误差感知切换与传输策略(EAST)及低复杂度策略,实验表明EAST在多模态情况下显著降低推断误差。

Comments Submitted to IEEE/ACM Transactions on Networking; a preliminary version appeared in the Proceedings of the 22nd IEEE International Conference on Mobile Ad-Hoc and Smart Systems (MASS 2025)

详情

展开后加载摘要…

URL PDF HTML 收藏
2604.21404 2026-04-24 cs.HC cs.CY 78%

Neurodiversity and Technostress: Towards a Multimodal Research Design for Evaluating Subjective, Physiological, and Behavioral Responses

神经多样性与技术压力:一种多模态研究设计,用于评估主观、生理和行为反应

Lisa van den Heuvel, Igor Ivkić, René Riedl

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 本文提出一种多模态研究设计,系统比较神经多样性与神经典型个体在标准化数字压力条件下的反应,整合主观感知、生理激活和行为表现,推动更包容的数字工作设计。

详情

展开后加载摘要…

URL PDF HTML 收藏
2604.19537 2026-04-24 cs.HC 78%

InvestChat: Exploring Multimodal Interaction via Natural Language, Touch, and Pen in an Investment Dashboard

InvestChat:通过自然语言、触控和笔在投资仪表板中探索多模态交互

Sarah Lykke Tost, Adson Lucas de Paiva Sales, Henrik Østergaard, Vaishali Dhanoa, Gabriela Molina León

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 InvestChat通过多模态输入提升投资探索体验,研究发现自然语言触控和笔输入能增强用户参与度,参与者在不同模态间互补使用,自然语言效果最佳。

Comments Poster accepted at AVI 2026; DOI included

详情

展开后加载摘要…

URL PDF HTML 收藏
2505.22175 2026-04-23 eess.SP 78%

Algorithm Unrolling-based Denoising of Multimodal Graph Signals

基于算法展开的多模态图信号去噪

Hayate Kojima, Keigo Takanami, Junya Hara, Yukihiro Bandoh, Seishi Takamura, Hiroshi Higashi, Yuichi Tanaka

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 本文提出一种基于交替最小化方案的多模态图信号去噪方法,通过同时学习图结构和信号恢复,利用深度算法展开学习参数,实验表明优于现有模型和深度学习方法。

Comments Submitted to IEEE TSIPN

Journal ref IEEE Transactions on Signal and Information Processing over Networks, 13 April 2026 (Early Access)

详情

展开后加载摘要…

URL PDF HTML 收藏
2604.17571 2026-04-23 physics.optics physics.app-ph 78%

Leaky-Wave Antenna Analysis using Multi-Modal Network Theory with Open Periodic Boundaries

基于开放周期边界的多模网络理论的泄漏波天线分析

Oscar Senlis, John N. Le, Anthony Grbic, Mauro Ettorre, Vincent Laquerbe, David González-Ovejero

专题命中 其他多模态 :multi-modal(title,abstract)

AI总结 本文提出两种方法,利用多模网络理论与开放周期边界分析泄漏波天线的色散特性,通过全波求解器和解析方法结合,验证了单位元的色散关系和接收性能。

Comments 9 pages, 11 figures, submitted to IEEE TAP

详情

展开后加载摘要…

URL PDF HTML 收藏
2603.19761 2026-04-21 math.OC q-bio.NC q-bio.QM 78%

Multimodal branched transport infers anatomically aligned brain reaction maps

多模态分支运输推断解剖学对齐的脑反应图谱

Cristian Mendico

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 本文通过结合血氧水平依赖响应、源重构脑电图和弥散张量成像各向异性,推断出解剖学对齐的脑反应图谱,揭示了各向异性成本对路由结构的重塑作用及几何-动态优化的非平凡排名反转。

详情

展开后加载摘要…

URL PDF HTML 收藏
2604.17526 2026-04-21 math.PR math.ST stat.TH 78%

Convergence of Langevin AIS for multimodal distributions

兰格文AIS在多模分布中的收敛性

Akshat Agarwal, Gautam Iyer, Aidan Jameson, Seungjae Son, Wyatt Wimmer

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 研究多模吉布斯分布下退火重要性采样算法与兰格文蒙特卡洛结合的收敛速率,证明误差阈值固定时时间复杂度与逆温度平方成正比,并提出控制AIS采样误差的通用量。

详情

展开后加载摘要…

URL PDF HTML 收藏
2604.17245 2026-04-21 cs.RO 78%

MM-Hand: A 21-DOF Multi-modal Modular Dexterous Robotic Hand with Remote Actuation

MM-Hand:一种21自由度多模态模块化灵活机械手 with 远程驱动

Zhuoheng Li, Qingquan Lin, Checheng Yu, Qiangyu Chen, Zhiqian Lan, Lutong Zhang, Hongyang Li, Ping Luo

机构 * The University of Hong Kong(香港大学) City University of Hong Kong(香港城市大学) XiFengGu Ltd.(西风谷有限公司)

专题命中 其他多模态 :multi-modal(title);multimodal(abstract)

AI总结 MM-Hand通过远程驱动技术实现21自由度多模态模块化机械手,集成了弹簧回弹腱驱动手指、3D打印模块化手指和手掌结构、快速腱连接器及多模态传感系统,验证了其轻量、传感丰富和可维护性。

详情

展开后加载摘要…

URL PDF HTML 收藏
2604.11723 2026-04-14 cs.GR 78%

Predicting User Satisfaction in Online Education Platforms: A Large Language Model Based Multi-Modal Review Mining Framework

在线教育平台用户满意度预测:基于大型语言模型的多模态评论挖掘框架

Arman Bekov, Azamat Nurgali

专题命中 其他多模态 :multi-modal(title,abstract)

AI总结 本文提出基于大型语言模型的多模态框架,通过整合文本、情感和行为数据,提升平台和课程层面用户满意度预测的准确性。

详情

展开后加载摘要…

URL PDF HTML 收藏
1706.00178 2026-04-08 cs.SI cs.IR physics.soc-ph 78%

Network Capacity Bound for Personalized PageRank in Multimodal Networks

多模网络中个性化PageRank的网络容量界

M. A. Kłopotek, S. T. Wierzchoń, R. A. Kłopotek

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 本文研究多模网络中个性化PageRank的容量界限,提出适用于超图的PageRank扩展模型,并证明了不同阻尼因子情况下权威流极限的定理。

Comments 21 pages. 2 tables, 30 bibliography positions

Journal ref Fundamenta Informaticae, Volume 189, Issue 1 (July 1, 2023) fi:10214

详情

展开后加载摘要…

URL PDF HTML 收藏
2604.04823 2026-04-07 math.PR math.ST stat.TH 78%

Rapid convergence of tempering chains to multimodal Gibbs measures

温控链快速收敛于多模Gibbs测度

Seungjae Son

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 研究平行与模拟退火链的谱间隙,证明其在低目标温度下具有多项式下界,适用于广泛势能函数类。

详情

展开后加载摘要…

URL PDF HTML 收藏
2604.02820 2026-04-06 cs.RO 78%

MFE: A Multimodal Hand Exoskeleton with Interactive Force, Pressure and Thermo-haptic Feedback

MFE:一种具有交互力、压力和热触觉反馈的多模态手外骨骼

Ziyuan Tang, Yitian Guo, Chenxi Xiao

机构 * School of Information Science and Technology, ShanghaiTech University(上海科技大学信息科学与技术学院)

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 本文提出MFE多模态手外骨骼,通过20自由度捕捉手部姿态,提供力、压力和热觉反馈,提升远程操作系统的感知与交互体验。

Comments 8 pages, 7 figures, 2 tables

Journal ref IEEE Robotics and Automation Letters 11 (2026) 3756-3763

详情

展开后加载摘要…

URL PDF HTML 收藏
2503.08945 2026-04-06 cs.HC 78%

PassAI: explainable artificial intelligence algorithm for soccer pass analysis using multimodal information resources

PassAI:一种利用多模态信息资源的可解释人工智能算法用于足球传球分析

Ryota Takamido, Jun Ota, Hiroki Nakamoto

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 PassAI通过结合跟踪数据和传球者赛季统计数据,实现了足球传球成功与失败的分类,并解释其决策依据,提升了体育领域AI算法的性能和可解释性。

Comments 25 pages, 7 figures, 2 tables. IEEE Access (2025)

详情

展开后加载摘要…

URL PDF HTML 收藏
2604.01390 2026-04-03 cs.RO 78%

A soft and lightweight fabric-based pneumatic interface for multimodal fingertip tactile feedback

一种柔软且轻量的基于织物的气动接口用于多模态指尖触觉反馈

Rui Chen, Daniele Leonardis, Antonio Frisoli

机构 * Institute of Mechanical Intelligence, School of Advanced Studies Sant’Anna (SSSA)(机械智能研究所,圣安娜高等研究学院)

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 本文提出一种基于织物的气动接口,实现轻量、低成本的多模态指尖触觉反馈,通过实验验证其在触觉渲染中的有效性。

详情

展开后加载摘要…

URL PDF HTML 收藏
2603.28362 2026-03-31 cs.RO cond-mat.mtrl-sci cond-mat.soft physics.app-ph 78%

A Foldable and Agile Soft Electromagnetic Robot for Multimodal Navigation in Confined and Unstructured Environments

一种多功能软电磁机器人,用于在受限和无结构环境中多模式导航

Zhihao Lv, Xiaoyong Zhang, Mengfan Zhang, Xiaoyu Song, Xingyue Liu, Yide Liu, Shaoxing Qu, Guoyong Mao

机构 * State Key Laboratory of Fluid Power and Mechatronic Systems(流体动力与机电系统国家重点实验室) Key Laboratory of Soft Machines and Smart Devices of Zhejiang Province(浙江省软体机器人与智能器件重点实验室) Center for X-mechanics(交叉力学中心) Department of Engineering Mechanics, Zhejiang University(浙江大学工程力学系)

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 本文提出一种可折叠且灵活的软电磁机器人,具备多种运动模式,可在复杂环境中高效导航,其体积可减少79%,并能适应黏弹性表面和模拟生物组织。

详情

展开后加载摘要…

URL PDF HTML 收藏
2603.27036 2026-03-31 physics.ins-det cs.LG 78%

Material Identification using Multi-Modal Intrinsic Radiation and Radiography

利用多模态内在辐射和X射线摄影进行材料识别

Khoa Nguyen, Brendt Wohlberg, Oleg Korobkin, Marc Klasky

机构 * Los Alamos National Laboratory(洛斯阿拉莫斯国家实验室)

专题命中 其他多模态 :multi-modal(title,abstract)

AI总结 本文通过结合X射线摄影、高分辨率γ射线光谱和中子多重性测量,研究特殊核材料配置的多模态材料识别,展示随机森林分类器在单壳和双壳配置中的高识别精度。

详情

展开后加载摘要…

URL PDF HTML 收藏
2502.10611 2026-03-27 physics.app-ph cs.SY eess.SY 78%

Demonstration of a planar multimodal periodic filter at THz frequencies

太赫兹频率下平面多模周期滤波器的演示

Ali Dehghanian, Mohsen Haghighat, Thomas Darcie, Levi Smith

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 本文提出一种基于共面带状线和有限地面共面波导的平面多模周期滤波器,用于太赫兹频率操作,通过灵活设计和主动控制实现滤波特性。

Comments 18 pages, 13 figures

详情

展开后加载摘要…

URL PDF HTML 收藏