arXivDaily arXiv每日学术速递 周一至周五更新

AI 大模型

多模态大模型

跨文本、图像、视频、音频等模态的大模型与学习方法。

共收录 3020 信号源:cs.CV, cs.CL, cs.AI, cs.MM, eess.AS

1. 其他多模态 196 篇

2606.16294 2026-06-16 cs.CV q-bio.NC 新提交 57%

Sex-based Network-Specific Differences in Connectomes: A Krakencoder-Based Analysis

基于性别的连接组网络特异性差异:基于Krakencoder的分析

Vibhashree S H, Debanjali Bhattacharya, Vamshi Krishna Kancharla, Neelam Sinha

机构 * Centre for Brain Research, Indian Institute of Science(印度科学研究所大脑研究中心) Dept. of Artificial Intelligence, Amrita School of Artificial Intelligence, Amrita Vishwa Vidyapeetham(阿姆里塔大学阿姆里塔人工智能学院人工智能系)

专题命中 其他多模态 :cross-modal(abstract);分类 cs.CV

AI总结 使用Krakencoder框架模拟脑连接组模态间缺陷传播,分析702名健康被试的结构和功能连接组,发现默认模式网络扰动最大,感觉运动网络最小,完整预测连接组保留更多性别判别信息。

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.08765 2026-06-12 cs.RO cs.CV 新提交 57%

RGB-S: Image-Aligned Tactile Saliency for Robust Dexterous Manipulation

RGB-S: 用于鲁棒灵巧操作的图像对齐触觉显著性

Shengcheng Luo, Kefei Wu, Xiaoying Zhou, Wanlin Li, Ziyuan Jiao, Chenxi Xiao

机构 * ShanghaiTech University(上海科技大学) Beijing Institute for General Artificial Intelligence(北京通用人工智能研究院)

专题命中 其他多模态 :cross-modal(abstract);分类 cs.CV

AI总结 提出RGB-S框架,通过正向运动学和相机标定将触觉传感器位置投影到RGB图像平面,生成力调制高斯显著性图,显式对齐触觉与视觉,在严重遮挡下灵巧操作成功率提升26.7个百分点。

Comments 20 pages, 7 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.10541 2026-06-10 cs.CV 新提交 57%

GRAR: Glass-induced Reflection Artifact Removal in LiDAR Point Clouds

GRAR: LiDAR点云中玻璃引起的反射伪影去除

Wanpeng Shao, Zeyi Guo, Bo Zhang, Yifei Xue, Tie Ji, Yizhen Lao

机构 * College of Computer Science and Electronic Engineering, Hunan University(湖南大学计算机科学与电子工程学院) School of Design, Hunan University(湖南大学设计学院) School of Finance and Statistics, Hunan University(湖南大学金融与统计学院)

专题命中 其他多模态 :multi-modal(abstract);分类 cs.CV

AI总结 提出两阶段框架,先利用多模态视觉基础模型和几何线索精确分割玻璃区域,再基于物理驱动的反射感知局部-全局几何相似性描述符去除反射伪影,在多个公开数据集上优于现有方法。

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.09868 2026-06-10 cs.LG cs.AI 新提交 57%

SPACE: Source-free Proxy Anchor Concept Erasure for MLLMs

SPACE: 面向多模态大语言模型的无源代理锚点概念擦除

Zhijing Zhang, Jiaqi Ding, Qianshan Wei, Nan Zhou, Jiaqi Li, Yongliang Wu, Tongxin Zhu, Xiaolin Fang

机构 * University of Science and Technology of China(中国科学技术大学)

专题命中 其他多模态 :multimodal(abstract);分类 cs.AI

AI总结 提出SPACE框架,首个针对多模态大语言模型的无源机器遗忘方法,通过文本引导的代理锚点选择和双约束语义隔离,在不访问目标数据的情况下擦除概念,并保持模型性能。

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.10197 2026-06-10 astro-ph.GA cs.AI 新提交 57%

Integral Field Unit Spectroscopy with One Fiber

单光纤积分场单元光谱学

Zehao Peng, Biprateep Dey, Chris J. Maddison, Joshua S. Speagle

机构 * University of Toronto(多伦多大学) Vector Institute(向量研究所)

专题命中 其他多模态 :multi-modal(abstract);分类 cs.AI

AI总结 提出一种多模态概率基础模型,利用掩码自编码器从宽带图像预测星系任意空间位置的高分辨率光谱,无需IFU训练数据,性能与监督基线相当。

Comments Accepted for Conference on Physics and AI at Stanford University (PAI 2026)

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.09643 2026-06-09 cs.DC cs.AI cs.LG cs.OS 新提交 57%

FMplex: Model Virtualization for Serving Extensible Foundation Models

FMplex: 用于服务可扩展基础模型的模型虚拟化

Hetvi Shastri, Pragya Sharma, Walid A. Hanafy, David Irwin, Mani Srivastava, Prashant Shenoy

机构 * University of Massachusetts Amherst(马萨诸塞大学阿姆赫斯特分校) University of California Los Angeles(加州大学洛杉矶分校)

专题命中 其他多模态 :multimodal(abstract);分类 cs.AI

AI总结 提出FMplex系统,通过将基础模型作为虚拟化层实现多任务共享,结合批感知公平队列调度器,在7个基础模型和92个下游任务上降低延迟达80%,提升任务容量6倍。

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.08440 2026-06-09 cs.RO cs.CV 新提交 57%

GraspFoM: Towards Reconstruction-Driven Robotic Grasping with 3D Foundation Priors

GraspFoM:基于3D基础先验的重建驱动机器人抓取

Dongli Wu, Xiaobao Wei, Hao Wang, Qiaochu Dong, Ying Li, Qingpo Wuwu, Ming Lu, Wufan Zhao

机构 * The Hong Kong University of Science and Technology (Guangzhou)(香港科技大学(广州)) Peking University(北京大学) The Hong Kong University of Science and Technology(香港科技大学)

专题命中 其他多模态 :multimodal(abstract);分类 cs.CV

AI总结 提出GraspFoM框架,利用3D基础先验(SAM3D)构建共享3D物体潜变量,联合优化重建与抓取姿态预测,通过锚点初始化的截断姿态推理扩散器生成连续多模态抓取,实现高保真重建与最优抓取。

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.08218 2026-06-09 cs.LG cs.AI math.ST stat.ML stat.TH 新提交 57%

How Deep Are Deep GPs, Really? A Sharp Threshold and a Non-Gaussian Limit for Compositional GPs

深度高斯过程到底有多深?组合高斯过程的尖锐阈值与非高斯极限

Mark Kozdoba, Shie Mannor

机构 * Technion, IIT(以色列理工学院) NVIDIA(英伟达)

专题命中 其他多模态 :multimodal(abstract);分类 cs.AI

AI总结 本文研究了深度高斯过程先验在深度增长时的极限行为,识别出RBF核带宽的尖锐阈值,低于该阈值时先验收敛到非退化非高斯分布,具有非零坐标依赖。

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.07658 2026-06-09 cs.CV cs.LG 新提交 57%

What neurosurgeons need to see: synthetic intra-operative MRI from ultrasound for brain-shift compensation in brain tumour surgery

神经外科医生需要看到的:用于脑肿瘤手术中脑移位补偿的超声合成术中MRI

Santiago Cepeda, Olga Esteban-Sinovas, Ignacio Arrese, Rosario Sarabia

机构 * Department of Neurosurgery, Neurovascular Unit, Río Hortega University Hospital, Valladolid, Spain(西班牙巴利亚多利德里奥·奥尔特加大学医院神经外科神经血管科) Specialized Group in Biomedical Imaging and Computational Analysis (GEIBAC), Instituto de Investigación Biosanitaria de Valladolid (IBioVALL), Valladolid, Spain(西班牙巴利亚多利德生物医学研究与计算分析专业组(GEIBAC),巴利亚多利德生物健康研究所(IBioVALL))

专题命中 其他多模态 :multimodal(abstract);分类 cs.CV

AI总结 提出一种端到端流水线,通过融合术前MRI、术中超声生成的合成MRI及锚定该合成图像的可变形配准,生成术前成像空间中的全脑MRI体积,以补偿脑移位,为神经导航提供类似MRI的术中视野更新。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.18228 2026-08-20 stat.ME 新提交 50%

Using Spacing to Detect Multi-Modality

利用间距检测多模态

Greg Kreider

专题命中 其他多模态 :multi-modal(abstract)

AI总结 本文提出利用间距特征检测多模态的方法,开发了含参数模型、游程分析等的检验方法,结合变点检测器定位间距变化,通过示例验证并总结了总体性能。

Comments 28 pages, 5 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.18181 2026-08-20 stat.ML cs.LG 新提交 50%

Fair Multi-View Determinantal Coresets via Adaptive NEPv

基于自适应NEPv的公平多视图行列式核心集

Richard Yi Da Xu

专题命中 其他多模态 :multimodal(abstract)

AI总结 该研究针对多视图子集选择的公平性问题,提出基于自适应NEPv的公平多视图行列式核心集方法,推导自适应SCF求解器并通过实验验证,为商标管理等场景提供了多视图多样性选择方案。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.14878 2026-08-18 stat.ME 新提交 50%

Quantification and Decomposition of Uncertainty Using Sliced-Normal Distribution: With Applications to NASA Data

基于切片正态分布的不确定性量化与分解:在NASA数据中的应用

Arindam RoyChowdhury, Luis G. Crespo, Henry Lam

专题命中 其他多模态 :multi-modal(abstract)

AI总结 本文改进了切片正态(SN)分布框架,将其参数估计转化为凸优化问题,明确其表达能力并提出高维拟合流程,在NASA失速飞行数据上验证了该方法可捕捉非线性依赖模式。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.15489 2026-08-18 eess.SP cs.SY eess.SY 新提交 50%

Contours-Seeking Proposal Density Particle Filter and Resilient Terrain-Referenced Navigation

轮廓搜索提议密度粒子滤波与弹性地形基准导航

Junwoo Park, Hyochoong Bang

专题命中 其他多模态 :multimodal(abstract)

AI总结 针对粒子滤波退化问题,提出含高斯混合随机强迫机制的轮廓搜索采样策略,经实验验证可降低权重方差、提升有效样本量,在恶劣场景下仍能可靠运行。

Comments 17 pages. Author's accepted version. Published in IEEE Transactions on Aerospace and Electronic Systems

Journal ref IEEE Transactions on Aerospace and Electronic Systems, vol. 61, no. 6, pp. 15627-15641, Dec. 2025

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.16572 2026-08-18 cs.RO 新提交 50%

ViHaTeleop: A Low-Cost, Lightweight Visual-Haptic Teleoperation System for Dexterous Manipulation Learning

ViHaTeleop:一种用于灵巧操作学习的低成本轻量型视觉-触觉遥操作系统

Fucai Zhu, Yanhou Lai, Paul Maestre, Koichi Hashimoto

机构 * Graduate School of Information Sciences, Tohoku University(东北大学信息科学研究生院)

专题命中 其他多模态 :multi-modal(abstract)

AI总结 ViHaTeleop是一款低成本轻量型视觉-触觉遥操作系统,结合SLAM、相机跟踪与LRA反馈,经实验验证其可提升接触关键任务的操作成功率与主观体验,支持从演示到策略训练的完整流程。

Comments Accepted to the 2026 IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS). 8 pages

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.15520 2026-08-18 cs.LG 新提交 50%

Guaranteed Adaptive Modality Acquisition: When the Policy Chooses Its Own Calibration Group

带保证的自适应模态获取:策略选择自身校准组时

Melika Baghi

专题命中 其他多模态 :multimodal(abstract)

AI总结 该研究针对自适应模态获取中策略诱导分组破坏条件校准假设的问题,提出RouteCert方法,在临床心电图任务及掩码多模态基准上实现了高回答比例与低分歧率的良好性能。

Comments 23 pages, 4 figures, 14 tables. Includes appendix with full proofs and additional experiments

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.12235 2026-08-13 cond-mat.soft 新提交 50%

Random close packing at extreme size ratios with an Adam-based inflation protocol

基于Adam优化膨胀协议的极端尺寸比下的随机密堆积

Kenneth Desmond

专题命中 其他多模态 :multimodal(abstract)

AI总结 该研究提出基于Adam优化器的\texttt{rcpgenerator}代码,实现极端尺寸比下的高维密堆积生成,性能优于传统方法,结果与实验及理论预测吻合。

Comments 11 pages, 10 figures, 3 tables, Code: https://github.com/KD-physics/RCPGenerator; data archived at Zenodo, doi:10.5281/zenodo.21435447

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.10555 2026-08-12 cs.NI 新提交 50%

Sensing in Low-altitude Wireless Networks: Systems, Techniques, and Developments

低空空域无线网络中的感知:系统、技术与发展

Zihao Tao, Yiming Zhao, Hongtao Zhao, Zijun Gong, Ying Cui

专题命中 其他多模态 :multi-modal(abstract)

AI总结 本文针对低空空域无线网络(LAWN)的感知需求,系统综述其系统框架、核心技术与未来方向,还给出多模态感知案例,提供更全面针对性的LAWN感知综述。

Comments 7 pages, 2 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.10402 2026-08-12 cs.LG cs.DC 新提交 50%

TideRL: Boosting Agentic RL Goodput with Readiness-Aware Scheduling

TideRL:通过就绪感知调度提升智能体强化学习的有效吞吐量

Yanyu Ren, Xizheng Wang, Xiao Liu, Bowen Lv, Hanchen Zhang, Shudan Zhang, Hanyu Lai, Shuai Wang, Li Chen, Dan Li, Jie Tang

机构 * Tsinghua University(清华大学) Zhongguancun Laboratory(中关村实验室)

专题命中 其他多模态 :multi-modal(abstract)

AI总结 TideRL是一种就绪感知弹性RL系统,通过CTB、RA²P和ERS技术,在多轮智能体工作负载上大幅提升RL训练有效吞吐量,同时优化KV缓存命中率、训练时间和等待时间。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.11165 2026-08-12 cond-mat.mtrl-sci 新提交 50%

Structural, Optical and Magnetic Properties of Superparamagnetic Fe3O4@TiO2 and Fe3O4@SiO2@TiO2 CoreShell Nanostructures

超顺磁性Fe3O4@TiO2和Fe3O4@SiO2@TiO2核壳纳米结构的结构、光学与磁学性质

Wagner Henrique Gamas, Rosana R. Rangela, Grecia Alejandra Gomez-Iriarteb, Sergio Seabra. Pablo, L. Bernardo

专题命中 其他多模态 :multimodal(abstract)

AI总结 本研究合成并表征Fe3O4@TiO2和Fe3O4@SiO2@TiO2核壳纳米结构,通过多种表征手段分析其性质,证实该类结构可作为多模态癌症治疗的多功能平台,具备MRI、磁热疗及光疗等应用潜力。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.10280 2026-08-12 astro-ph.IM astro-ph.CO 新提交 50%

Tabular foundation models for the estimation of probabilistic quasar photometric redshifts in S-PLUS

用于S-PLUS中类星体概率测光红移估计的表格基础模型

Raquel R. Valença, Lilianne Nakazono, Rafael Izbicki, Marco Henrique de Almeida Inácio, Bruno Marcondes e Resende, Maycon Jorge Deláqua da Silva, Kiana Coimbra Buin Lins, Natanael M. Cardoso, Claudia Mendes de Oliveira

专题命中 其他多模态 :multi-modal(abstract)

AI总结 本研究以S-PLUS DR6类星体为对象,对比表格基础模型与8种基线模型,发现TabPFN 2.5在概率测光红移估计中表现最优,尤其适用于小训练集或协变量偏移场景。

Comments 28 pages, 10 figures, 6 tables. Submitted to the AAS Journals

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.09030 2026-08-11 eess.SY cs.LG cs.SY math.OC 新提交 50%

Closing the loop in learning with missing data

缺失数据学习中的闭环构建

Dimitrios Pylorof, Humberto E. Garcia

专题命中 其他多模态 :multimodal(abstract)

AI总结 该研究针对训练数据缺失的机器学习问题,从动力系统视角推导了具有李雅普诺夫稳定性的自适应学习机制,在多模态场景中验证了其能提升学习一致性与稳定性的效果。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.05454 2026-08-07 cs.LG stat.ML 新提交 50%

Hybrid Probabilistic Zonotopes for Identifiable and Refinable Predictive Uncertainty

用于可识别和可细化预测不确定性的混合概率 zonotope

Zhen Zhang, Amr Alanwar

专题命中 其他多模态 :multi-modal(abstract)

AI总结 该研究提出混合概率 zonotope(HProbZ)作为神经网络预测头,分离三种不确定性来源,可细化多步预测分布,具备独特结构特性,在基准测试中优于同编码器混合基线。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.06078 2026-08-07 astro-ph.IM stat.CO 新提交 50%

A space of inference spaces in the space sciences - Parametric Bayesian inference in astronomy, cosmology and particle physics

空间科学中的推理空间空间——天文学、宇宙学与粒子物理中的参数贝叶斯推理

Johannes Buchner

专题命中 其他多模态 :multi-modal(abstract)

AI总结 本文通过7个维度表征推理问题的参数空间,以天文学等领域的参数贝叶斯推理样本为基础,将整理后的推理问题样本作为新采样器的标准测试平台,并提供Docker计算镜像保障可复现性与易用性。

Comments paper in prep

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.02695 2026-08-05 cs.CR cs.LG cs.SE 新提交 50%

Stylometric Defenses Against Author Impersonation in Software Repositories

针对软件仓库中作者冒充的风格计量防御

Leonid Ravich, Michael Fire

专题命中 其他多模态 :cross-modal(abstract)

AI总结 本研究提出基于跨模态Transformer的补丁级风格计量防御,结合流式异常检测器,在真实供应链事件中高效检测软件仓库的作者冒充行为。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.00690 2026-08-04 cs.NI 新提交 50%

LLM-Assisted Coalition Formation for Cooperative Perception in Autonomous Driving

大语言模型辅助的自动驾驶协同感知联盟形成

Ahmad Sarlak, Hao Wang, Rahul Amin, Abolfazl Razi

专题命中 其他多模态 :multimodal(abstract)

AI总结 该研究针对现有协同感知方法未优化车辆选择的问题,提出LLM辅助的联盟形成框架,结合DPP与ADMM优化,在OPV2V等数据集上实现更优性能与网络效率。

Comments Accepted for presentation at IEEE Global Communications Conference (GLOBECOM 2026), Cognitive Radio and AI-Enabled Networks Symposium

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.02531 2026-08-04 cond-mat.mtrl-sci 新提交 50%

Revealing Intrinsic Anisotropy of Collective Magnetic Excitations in Twinned Crystals of a Kitaev-Heisenberg Quantum Magnet

揭示Kitaev-Heisenberg量子磁体孪晶中集体磁激发的本征各向异性

Naipeng Zhang, Nikolai Simonov, Mykhaylo Ozerov, Sumedh Rathi, Nolan Heffner, Sara Huszar, Long Chen, Haidong Zhou, Guangxin Ni, Chaebin Kim, Martin Mourigal, Stephen M. Winter, Zhigang Jiang, Dmitry Smirnov

专题命中 其他多模态 :multimodal(abstract)

AI总结 本研究结合多模态光学探针,分离Kitaev-Heisenberg量子磁体Na₃Co₂SbO₆孪晶的单畴磁振子响应,揭示其本征二重面内磁振子各向异性,建立通用的多畴量子磁体自旋动力学研究框架。

详情

展开后加载摘要…

URL PDF HTML 收藏
2608.01163 2026-08-04 astro-ph.CO astro-ph.GA astro-ph.IM 新提交 50%

AGN Reverberation Mapping with LITMUS: Fundamental Limits on lag Recovery Rates

基于LITMUS的活动星系核反响映射:滞后恢复率的基本极限

Hugh McDougall, Tamara M. Davis, Benjamin J. S. Pope, Paul Martini, Zhefu Yu, Chris Lidman, Geraint F. Lewis

专题命中 其他多模态 :multimodal(abstract)

AI总结 本研究开发了新的滞后测量包LITMUS,利用贝叶斯证据识别假阳性滞后,分析OzDES样本发现以往RM研究高估了滞后置信度,不同发射线的AGN反响百分比存在显著差异。

Comments 32 Pages, 21 Figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.29675 2026-08-03 math.ST cs.LG stat.ME stat.ML stat.TH 新提交 50%

Differentially Private Nonparametric Modal Learning with Applications to Regression and Clustering

差分隐私非参数模态学习及其在回归与聚类中的应用

Arkajyoti Bhattacharjee, Arnab Auddy

专题命中 其他多模态 :multimodal(abstract)

AI总结 该研究提出差分隐私非参数模态学习方法DP-GRAMS,实现多峰分布密度模态的高概率恢复,扩展出DP-PMS回归与DP-GRAMS-C聚类方法,在合成及真实数据上展现良好隐私-效用权衡。

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.28850 2026-08-03 astro-ph.EP astro-ph.IM 新提交 50%

Optical and acoustic ground effects simulations from terminal defense asteroid disruption via the PI method

利用PI方法进行终端防御小行星破碎产生的光学与声学地面效应模拟

Brin Bailey, Alexander N. Cohen, Philip Lubin, Darrel K. Robertson, Mark Boslough, Sasha Egan, Elizabeth A. Silber, Dharv Patel

专题命中 其他多模态 :multi-modal(abstract)

AI总结 该研究通过模拟验证,NASA的PI方法可在数小时至数年预警内破碎小行星,将2023 PDC这类威胁破碎为100万个碎片时,能大幅降低地面光学与声学效应,实现行星防御。

Journal ref Acta Astronautica (2024), vol. 221, pp. 230-239

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.27163 2026-07-30 cond-mat.mtrl-sci 新提交 50%

Materials Behavior as Mechanism Ensembles: A Probabilistic Framework for Emergent Behaviors

材料行为作为机制集合:一种涌现行为的概率框架

Brad L. Boyce, Mitchell A. Wood, Krishna Garikipati, Andreas E. Robertson, Jeffrey Larson, Ishan Srivastava, Bert Debusschere, Saaketh Desai, Prasad Iyer, Pieterjan Robbe, Mathew Cherukara, Todd Munson, Ming Du, Trupti Mohanty, David J. Gardner, Laurent Capolungo, Benjamin A. Jasperson, Jingye Tan, Rémi Dingreville

专题命中 其他多模态 :multimodal(abstract)

AI总结 本文提出将材料行为视为机制集合的概率框架,以概率方式连接机制激活等与宏观可观测量,可应用于金属疲劳等系统,助力提前识别涌现行为的有利条件。

详情

展开后加载摘要…

URL PDF HTML 收藏