arXivDaily arXiv每日学术速递 周一至周五更新

AI 大模型

多模态大模型

跨文本、图像、视频、音频等模态的大模型与学习方法。

共收录 3020 信号源:cs.CV, cs.CL, cs.AI, cs.MM, eess.AS

1. 其他多模态 196 篇

2607.25792 2026-07-29 cs.NI 新提交 50%

The Model in the Middle: Toward AI-Native Real-Time Communication

中间的模型:迈向人工智能原生实时通信

Ziqian Liu, Minghao Li, Yiming Qiu

专题命中 其他多模态 :multimodal(abstract)

AI总结 研究迈向人工智能原生实时通信,提出将模型视为有状态计算中间盒的新观点,探索网络感知推理调度等三个跨阶段协调机会,构建Conflux验证,结果显示在网络退化时响应延迟等有改善,呼吁建立相关实时通信堆栈。

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.25312 2026-07-29 cs.LG 新提交 50%

Guiding Posterior Exploration with Optimizer-Derived Geometry

用优化器派生几何引导后验探索

Moritz Schlager, Emanuel Sommer, Thomas Möllenhoff, David Rügamer

机构 * TUM(慕尼黑工业大学) LMU Munich(慕尼黑大学) RIKEN AIP(理化学研究所先进智能项目中心)

专题命中 其他多模态 :multimodal(abstract)

AI总结 研究贝叶斯神经网络不确定性量化中高维多峰后验分布探索的计算成本问题,提出基于优化器派生几何的预处理采样策略,可减少采样预热阶段,提升性能与稳定性,且无额外计算成本,经多数据集和架构验证。

Comments Accepted for presentation at the OPTIMAL Workshop at AISTATS 2026

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.22989 2026-07-28 stat.CO stat.ME 新提交 50%

SuSIE: Subset Simulation with Intrepid Exploration

SuSIE:具有无畏探索的子集模拟

Adwait Sharma, Promit Chakroborty, Michael D. Shields

专题命中 其他多模态 :multimodal(abstract)

AI总结 研究子集模拟框架在多失效区域等复杂情况下估计结构可靠性的挑战,提出用改进的无畏MCMC采样器替代传统方法,经示例验证该方法能解决复杂特征,有效估计失效概率。

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.23298 2026-07-28 cs.HC 新提交 50%

Cross Sensory Co-Design Tools and Interaction Qualities

跨感官协同设计工具与交互质量

Albrecht Kurze, Klaus Stephan

专题命中 其他多模态 :multi-modal(abstract)

AI总结 研究跨感官交互设计难题,核心方法是开发Loaded Dice和Wheel of Plush工具,利用技术联觉原理及简单交互方案实现传感器与执行器映射,主要贡献为助力跨感官交互设计及探索新应用领域。

Comments In "Workshop Cross-Sensory Futures: Rewiring Perception in HCI" at CHI 2026. April 13, 2026. Barcelona, Spain

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.22330 2026-07-27 stat.ME eess.SP 新提交 50%

A Hierarchical Likelihood Model for Non-linear Inverse Problems under Additive and Multiplicative Noise

一种用于加性和乘性噪声下非线性逆问题的分层似然模型

Nicolas Goeman, Pierre-Antoine Thouvenin, Pierre Chainais

专题命中 其他多模态 :multimodal(abstract)

AI总结 针对加性和乘性噪声下的非线性逆问题,提出通用分层贝叶斯模型及高效MCMC算法。该方法无需校准近似模型超参数,更通用。通过天文学合成数据评估,在逐点估计和计算成本上达最优,为从业者选模型提供指导。

Comments 10 pages, 6 figures, 4 algorithms, 2 tables, submitted

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.19597 2026-07-23 astro-ph.SR astro-ph.IM cs.LG 新提交 50%

A Deep Learning Framework for Predicting Solar EUV Irradiance During Significant Flares

一种用于预测重大耀斑期间太阳极紫外辐射的深度学习框架

Sathvik Soman, Jason T. L. Wang, Haimin Wang, Haodi Jiang

机构 * Sam Houston State University(萨姆休斯顿州立大学)

专题命中 其他多模态 :multimodal(abstract)

AI总结 该研究提出FlareEUV框架,利用NASA的SDO多仪器观测,通过轻量级基于注意力的架构从原始成像数据学习磁结构与日冕发射关系,用于预测重大太阳耀斑期间连续三天6.5纳米处每日EUV辐照度,实验证明其性能优于基线方法。

Comments 8 pages, 9 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.18507 2026-07-22 cs.HC 新提交 50%

AInimation: Animating from Prompt to AI-Generated Responses

动画:从提示到人工智能生成的响应的动画制作

Jiaqi Wu, Damien Masson

专题命中 其他多模态 :multimodal(abstract)

AI总结 研究探索提示与AI生成响应间的动画过渡,通过审查800个示例设计分类法,提出多种动画形式。实验表明添加动画过渡有助于用户审查响应,在定位元素、识别变化及验证提示解释方面表现更佳,适用于集成AI的软件,慢动画更优。

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.17185 2026-07-21 cs.HC cs.CY 新提交 50%

PocketPPD: Screening for Postpartum Depression Risk Using Passive Smartphone Sensing

PocketPPD:使用被动式智能手机传感技术筛查产后抑郁风险

Jia Tang, Helinyi Peng, Akihito Taya, Kaoru Sezaki, Daisuke Nishi, Anind K Dey, Yuuki Nishiyama

专题命中 其他多模态 :multi-modal(abstract)

AI总结 研究针对产后抑郁筛查难题,提出基于被动智能手机传感的PocketPPD方法,利用产妇情境特征检测风险。通过对61名产后女性的四周可行性研究,给出不同模型AUC结果,发现重要数字生物标志物,为低负担筛查及围产期心理健康监测提供依据。

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.15448 2026-07-20 cs.RO 新提交 50%

VTAP Gripper: Synergizing Fingertip Sensing and a Visuo-Tactile Active Palm for Dexterous In-Hand Manipulation

VTAP 夹爪:指尖传感与视觉触觉主动手掌协同实现灵巧的手中操作

Yuhao Zhou, Sheeraz Athar, Zhixian Hu, Binghao Huang, Yunzhu Li, Juan Wachs, Yu She

机构 * Edwardson School of Industrial Engineering, Purdue University(普渡大学爱德华森工业工程学院) Department of Computer Science, Columbia University(哥伦比亚大学计算机科学系)

专题命中 其他多模态 :multi-modal(abstract)

AI总结 研究提出集成 VTAP 和触觉阵列传感器手指的夹爪,利用指掌协同与多模态感知实现操作。通过双模态手掌扩展能力,提出重定向框架。经多任务实验验证,该夹爪及框架为灵巧夹爪设计等提供实用参考架构。

Comments 8 pages, 10 figures, accepted to the 2026 IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS 2026). Project webpage: https://yuhochau.github.io/vtap/

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.12598 2026-07-15 cs.SE 新提交 50%

Hierarchical Fault Localization for Autonomous Driving Systems with Hypothesis Validation and Intent Analysis

基于假设验证和意图分析的自动驾驶系统分层故障定位

Rui Zheng, Changwen Li, Yi Ji, Rongjie Yan

专题命中 其他多模态 :multi-modal(abstract)

AI总结 针对自动驾驶系统故障难定位问题,提出HINT框架,通过假设验证和意图分析分两阶段进行分层故障定位,无需重新模拟,经在Apollo上评估,该框架在模块级诊断和代码级定位性能强,实际错误端到端准确率达77.8%。

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.12975 2026-07-15 stat.ML cs.LG cs.NA math.NA math.OC 新提交 50%

Ensemble Controlled-Flow Filtering for Implicit Data Assimilation

用于隐式数据同化的集成控制流滤波

Zhuoyuan Li, Yue Zhao, Ming Li

机构 * Institute for Functional Intelligent Materials(功能智能材料研究所) National University of Singapore(新加坡国立大学) School of Mathematical Sciences(数学科学学院)

专题命中 其他多模态 :multimodal(abstract)

AI总结 研究针对多对一、隐式等复杂观测机制下的数据同化问题,提出集成控制流滤波器(EnCF),通过随机控制流及伴随匹配学习依赖观测的控制,该方法在处理非高斯等复杂观测模型时表现更佳。

Comments 26 pages

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.12833 2026-07-15 stat.ML cs.LG math.ST stat.TH 新提交 50%

ANGLE: Angular Neural Generative Learning via Engression

ANGLE:通过回归进行角度神经生成学习

Rajdeep Pathak, Archi Roy, Tanujit Chakraborty

机构 * LPSM, Sorbonne Université(索邦大学LPSM) SAFIR, Sorbonne University Abu Dhabi(索邦大学阿布扎赫德分校) Indian Institute of Management, Kozhikode(印度管理学院科钦分校)

专题命中 其他多模态 :multimodal(abstract)

AI总结 针对圆形数据回归问题,提出ANGLE轻量级深度生成框架,通过广义圆能量得分损失优化生成映射学习角度响应全条件分布,建立理论性质,提供统一工具箱,经模拟和实际应用验证其有效性。

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.09171 2026-07-13 nlin.AO math-ph math.MP 新提交 50%

Paths to synchronization in the Kuramoto model with inertia

具有惯性的Kuramoto模型中的同步路径

Cook Hyun Kim, Yeomoon Kim, Stefano Boccaletti, B. Kahng

专题命中 其他多模态 :multimodal(abstract)

AI总结 研究有惯性的Kuramoto模型,探究单峰高斯和多峰均匀两种本征频率分布形式,发现其产生不同同步簇,导致序参量行为及同步路径不同,为惯性复杂系统集体同步动力学提供新视角。

Comments 31 pages, 26 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.07855 2026-07-10 cs.LG 新提交 50%

NFTR: From Provable Mode-Averaging to Geodesic Subgoal Selection in Offline Goal-Conditioned RL

NFTR:从可证明的模式平均到离线目标条件强化学习中的测地线子目标选择

Erdemt Bao, Xing Lei, Jun Chen

机构 * Huazhong University of Science and Technology(华中科技大学) Xi’an Jiaotong University(西安交通大学) University of Electronic Science and Technology of China(电子科技大学)

专题命中 其他多模态 :multi-modal(abstract)

AI总结 针对分层隐式Q学习在离线目标条件强化学习中存在的问题,提出NFTR方法,用条件归一化流取代高斯策略,结合基于架构三角不等式的三角松弛分数及RWDR目标,可避免高斯坍塌且在随机动力学下保持稳定。

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.07756 2026-07-10 cs.LG 新提交 50%

The Importance of Encoder Choice:A Tabular-Image Study

编码器选择的重要性:表格-图像研究

Ilia Koloiarov, Diego Coello de Portugal Mecke, Vijaya Krishna Yalavarthi, Tom Hanika, Lars Schmidt-Thieme

专题命中 其他多模态 :multimodal(abstract)

AI总结 研究首次评估表格模型作图像-表格设置的编码器,指出表格领域最佳的上下文学习模型因需标签处理实例,嵌入训练和测试实例不易,通过解决此问题强调了编码器因素在多模态学习中的重要性。

Comments This paper contains color figures. We recommend reading it digitally for the best experience

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.07848 2026-07-10 quant-ph cond-mat.mtrl-sci physics.chem-ph 新提交 50%

Quantum Sensors for Chemistry and Materials Science

用于化学和材料科学的量子传感器

Piotr Put, Arjun Pillai, Xuan Hoang Le, Mikhail D. Lukin, Hongkun Park

专题命中 其他多模态 :multimodal(abstract)

AI总结 探讨量子传感器(光泵磁力计和金刚石氮空位中心)在化学和材料科学中的应用,对比其不同特性,介绍在多种分析监测中的使用,以及在高通量化学分析和无损材料诊断方面的集成,有望应对现实分析挑战。

Comments 22 pages, 5 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.06778 2026-07-09 cs.HC 新提交 50%

Head, Gaze, or Finger? Comparing Object Selection Techniques in Augmented Reality for People with Low Vision

头部、注视还是手指?低视力人群在增强现实中对象选择技术的比较

Ruijia Chen, Tianyi Zhang, Sanbrita Mondal, Yukang Yan, Yuhang Zhao

专题命中 其他多模态 :multimodal(abstract)

AI总结 研究低视力人群在增强现实中对象选择技术,通过混合方法研究,让20名低视力者和18名视力正常者用头部、注视、手指指向三种技术在两种场景选目标,发现不同技术优劣势及低视力者偏好,为其可访问AR交互技术提供见解。

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.05526 2026-07-09 astro-ph.SR 新提交 50%

Evolution of Non-Stationary Quasi-Periodic Pulsations in Solar Flares with Aditya-L1/HEL1OS and GOES

利用Aditya-L1/HEL1OS和GOES研究太阳耀斑中非平稳准周期脉动的演化

Srikar Paavan Tadepalli, Abhishekh Kumar Srivastava, K. Sankarasubramanian

专题命中 其他多模态 :multi-modal(abstract)

AI总结 该研究利用相位分辨方法,结合变分模态分解等技术,检测太阳耀斑硬X射线光变曲线中非平稳QPPs,通过交叉检验评估其与热和非热成分关系,还扩展到耀斑目录,确定QPPs特征及漂移情况,揭示非平稳性不同状态。

Comments 18 pages, 7 figures, Accepted for publication in Philosophical Transactions of the Royal Society A

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.03204 2026-07-07 cs.RO 新提交 50%

Layout-independent actuation allocator for fin-actuated marine robots

用于鳍驱动海洋机器人的与布局无关的驱动分配器

Yuya Hamamatsu, Maarja Kruusmaa, Asko Ristolainen

机构 * Department of Computer Systems, Tallinn University of Technology(计算机系统系,塔林理工大学)

专题命中 其他多模态 :multi-modal(abstract)

AI总结 研究提出与布局无关的控制分配器,用含图神经网络、Transformer和混合密度网络的学习管道及可微物理代理模型,实现跨不同执行器配置零样本部署,提升轨迹跟踪性能。

Comments Accepted by 2026 International Conference on Intelligent Robots and Systems (IROS)

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.02543 2026-07-07 cs.DC 新提交 50%

ETALE: Evolving Topology with Accelerated Lock-free Execution for Dynamic Graph ANN Search on GPUs

ETALE:用于GPU上动态图ANN搜索的具有加速无锁执行的演化拓扑

Dongfang Zhao

专题命中 其他多模态 :multimodal(abstract)

AI总结 研究GPU上基于图的近似最近邻索引相关问题,提出ETALE索引,核心是无锁写时复制平板图,在多数据集上评估,相比其他索引速度更快且内存占用有界。

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.21185 2026-07-07 stat.ML cs.LG stat.ME 新提交 50%

Two Layers of Instability in Causal Estimation

因果估计中的两层不稳定性

Alexis Bellot

机构 * Alexis Bellot(亚历山大·贝尔特)

专题命中 其他多模态 :multimodal(abstract)

AI总结 本文揭示因果估计中存在两层不稳定性:第一层是因果效应作为数据分布的函数不连续;第二层是估计器本身在数据分布上可能跳跃不连续,并基于决策理论提出稳定性取决于损失函数是否与因果效应一致。

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.01429 2026-07-03 econ.EM 新提交 50%

A condition for the identification of multivariate models with binary instruments -- with Corrigendum and Addendum

二元工具变量多变量模型可识别性的一个条件——附勘误与增补

Florian Gunsilius

专题命中 其他多模态 :multimodal(abstract)

AI总结 本文提出一个经验条件,用于非参数点识别具有连续内生变量的多变量工具变量模型,仅需二元工具变量,推广了现有识别结果,并基于循环单调性等假设推导了渐近收敛结果。

Comments Original paper published in the Journal of Econometrics including corrigendum and addendum

Journal ref Journal of Econometrics 235.1 (2023): 220-238

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.00979 2026-07-02 cs.HC 新提交 50%

Visualizing Engineering Fundamentals: Design of Mixed Reality and Physical Toolkits for Effective Learning

可视化工程基础:混合现实与物理工具包的设计以促进有效学习

Mohammad Abu Nasir Rakib, Sharmin Akter, Eshwara Prasad Sridhar, Somik Biswas, Md Rassel Raihan, Mahmudur Rahman

专题命中 其他多模态 :multimodal(abstract)

AI总结 本研究通过用户实验比较了课堂讲授、混合现实应用和物理工具包三种教学方式,发现结合可视化与动手交互的多模态体验最受学生欢迎,为工程教育工具的人本设计提供了指导。

详情

展开后加载摘要…

URL PDF HTML 收藏
2607.00756 2026-07-02 cond-mat.mtrl-sci physics.atom-ph physics.comp-ph 新提交 50%

The BiP-PRISM algorithm for fast and scalable core-loss STEM-EELS simulations

BiP-PRISM算法:快速可扩展的芯损失STEM-EELS模拟

Philipp Pelz

专题命中 其他多模态 :multimodal(abstract)

AI总结 提出BiP-PRISM算法,通过束分割和自然邻域插值加速芯损失电子能量损失谱模拟,显著降低计算和内存需求,实现消费级GPU上的全分辨率元素映射。

Comments 21 pages, 7 figures, 7 tables; includes supplementary material

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.30945 2026-07-01 cs.CY 新提交 50%

Free-form Association Tasks Reveal Stereotype Hallucination in Large Language Models

自由联想任务揭示大型语言模型中的刻板印象幻觉

Xinrui Chloe Zhao, Douglas Guilbeault, Amir Goldberg

专题命中 其他多模态 :multimodal(abstract)

AI总结 通过抽象艺术和罗夏墨迹测试,比较人类与多模态LLM在自由联想中的刻板印象结构,发现LLM存在“刻板印象幻觉”,即生成不反映真实群体差异的强烈二阶刻板印象。

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.30886 2026-07-01 astro-ph.HE gr-qc physics.data-an 新提交 50%

Multipolar Magnetic-Field Inference for PSR J0740+6620 with Neural-Network-Accelerated NICER Pulse-Profile Modeling

PSR J0740+6620 的多极磁场推断:基于神经网络加速的 NICER 脉冲轮廓建模

Farhana Taiyebah, Constantinos Kalapotharakos, Greg Olmschenk, Wendy F. Wallace, Soumi De, Abu Bucker Siddik, Diane Oyen, Thibault Lechien, Zorawar Wadiasingh

专题命中 其他多模态 :multimodal(abstract)

AI总结 利用神经网络代理加速NICER脉冲轮廓建模,推断PSR J0740+6620的多极表面磁场结构,采用偏移偶极子加轴对称四极子模型,发现观测双峰轮廓可由偏移模型再现,但磁场参数存在简并。

Comments 18 pages, 10 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.26497 2026-06-26 cs.LG math.DS stat.ML 新提交 50%

Learning Probabilistic Filters with Strictly Proper Scoring Rules

使用严格适当评分规则学习概率滤波器

Eviatar Bach, Ricardo Baptista, Jochen Bröcker, Bohan Chen, Andrew Stuart

专题命中 其他多模态 :multi-modal(abstract)

AI总结 提出基于严格适当评分规则和Transformer的集成滤波器PSEF,通过合成轨迹训练分析映射逼近滤波分布,在非线性非高斯问题上优于经典方法。

Comments 87 pages, 17 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.26840 2026-06-26 physics.optics 新提交 50%

Taming the single-cylinder scattering through time-modulation -- The role of the modulation phase

通过时间调制驯服单圆柱散射——调制相位的作用

J. Yan, I. Katsantonis, M. Mostafa, V. Asadchy, M. Kafesaki

专题命中 其他多模态 :multi-modal(abstract)

AI总结 研究通过时间调制介电常数实现圆柱散射的参量放大和角度可调性,发现调制相位对散射模式(增强前向、后向或散射消除)起关键作用。

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.25711 2026-06-25 cs.ET 新提交 50%

Distributed SDN-Based Communication Architecture for the Pods4Rail System

基于分布式SDN的Pods4Rail系统通信架构

Dingyang Liu, Dereje Mechal Molla, Léo Mendiboure, Marion Berbineau

专题命中 其他多模态 :multimodal(abstract)

AI总结 提出一种集成SDN和MEC的分布式通信架构,通过分层控制实现低延迟、高可靠性的铁路-公路多式联运通信,控制器通信和流设置延迟低于现有文献。

Journal ref Proceedings of the 11th TRA Conference, May 2026, Budapest, Hungary

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.25265 2026-06-25 cs.LG 新提交 50%

Variational Inference via Entropic Transport Descent

通过熵传输下降的变分推断

Vincent Pacelli, Akash Ratheesh, Evangelos Theodorou

机构 * School of Aerospace Engineering(航空航天工程学院) Georgia Institute of Technology(佐治亚理工学院) Atlanta, GA 30332(亚特兰大, GA 30332)

专题命中 其他多模态 :multimodal(abstract)

AI总结 提出熵传输下降(ETD),一种基于粒子变分推断方法,通过熵正则化最优传输实现全局协调,避免高维方差坍塌和多模态模式坍塌,无需评分函数。

Comments 28 pages, 1 figure

详情

展开后加载摘要…

URL PDF HTML 收藏