arXivDaily arXiv每日学术速递 周一至周五更新

AI 大模型

多模态大模型

跨文本、图像、视频、音频等模态的大模型与学习方法。

2026-05-29 至 2026-05-29 共收录 8 信号源:cs.CV, cs.CL, cs.AI, cs.MM, eess.AS

1. 其他多模态 8 篇

2605.28869 2026-05-29 cs.LG cs.AI 83%

Balancing Multimodal Learning through Label Space Reshaping

通过标签空间重塑平衡多模态学习

Xiaoyu Ma, Weijie Zhang, Yuanhao Gao, Han Miao, Yongjian Deng, Hao Chen

专题命中 其他多模态 :multimodal(title,abstract);cross-modal(abstract);分类 cs.AI

AI总结 针对多模态学习中模态不平衡问题,提出基于标签空间重塑的BMLR方法,通过均衡各模态映射难度来提升多模态性能。

Comments In process

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.29590 2026-05-29 cs.MM 79%

State-Anchored Complete-View Distillation for Robust Conversational Multimodal Emotion Recognition

状态锚定的完整视图蒸馏用于鲁棒对话多模态情感识别

Zhaoyan Pan, Xiangdong Li, Wenke Wu, Mengting Ma, Ye Lou, Ji Zhou, Jiatong Pan, Wei Zhang

专题命中 其他多模态 :multimodal(title,abstract);分类 cs.MM

AI总结 提出CoRe-KD框架,通过完整视图教师蒸馏和状态锚定对齐,结合非言语冲突暴露,解决对话多模态情感识别中模态缺失和冲突问题。

Comments 25 pages, 5 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2503.17971 2026-05-29 cs.HC cs.ET 78%

Generating Multimodal Textures with a Soft Hydro-Pneumatic Haptic Ring

使用软水气动触觉环生成多模态纹理

Ana Sanz Cozcolluela, Koen Wosten, Yasemin Vardar

专题命中 其他多模态 :multimodal(title,abstract)

AI总结 提出一种软触觉环,结合气动和液压驱动,通过数据驱动渲染方法在近端指骨上生成粗糙度、热感和软度等多模态纹理,用户研究显示平均纹理匹配精度为68%。

Comments 29 pages, 19 figures, journal

Journal ref International Journal of Human-Computer Studies. volume 212, pages 103814, 2026

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.29358 2026-05-29 cs.AI 57%

Scaling Monosemanticity: Extracting Interpretable Features from Claude 3 Sonnet

扩展单一语义性:从Claude 3 Sonnet中提取可解释特征

Adly Templeton, Tom Conerly, Jonathan Marcus, Jack Lindsey, Trenton Bricken, Brian Chen, Adam Pearce, Craig Citro, Emmanuel Ameisen, Andy Jones, Hoagy Cunningham, Nicholas L Turner, Callum McDougall, Monte MacDiarmid, Alex Tamkin, Esin Durmus, Tristan Hume, Francesco Mosconi, C. Daniel Freeman, Theodore R. Sumers, Edward Rees, Joshua Batson, Adam Jermyn, Shan Carter, Chris Olah, Tom Henighan

机构 * Anthropic

专题命中 其他多模态 :multimodal(abstract);分类 cs.AI

AI总结 本研究通过稀疏自编码器从生产级语言模型Claude 3 Sonnet中提取可解释特征,验证了字典学习方法在大规模模型上的可扩展性,并分析了特征的多语言、多模态特性及其对模型行为的因果影响。

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.29639 2026-05-29 cs.OS 50%

RTP-LLM: High-Performance Alibaba LLM Inference Engine

RTP-LLM:高性能阿里巴巴大语言模型推理引擎

Boyu Tan, Jiarui Guo, Zongwei Lv, Hanbo Sun, Tong Yang, Kan Liu, Xinfei Shi, Zetao Hu, Yaxin Yu, Chi Zhang, Jianning Zhang, Xi Yang, Wei Zhang, Bo Cai, Silu Zhou, Xiyu Wang, Na He, Yinghao Yu, Wending Bao, Guiyang Huang, Yuxing Yuan, Juncheng Yin, Nan Wang, Lin Yang, Zechao Zhang, Lu Chen, Guoding Li, Tao Lan, Lin Qu

专题命中 其他多模态 :multimodal(abstract)

AI总结 提出RTP-LLM推理引擎,通过文件顺序驱动I/O、预填充-解码分离架构、分层多级KV缓存、模块化推测解码等技术,在工业规模部署中实现显著性能提升。

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.14855 2026-05-29 cs.LG 50%

Adaptive Exponential Integration for Stable Gaussian Mixture Black-Box Variational Inference

自适应指数积分用于稳定高斯混合黑箱变分推断

Baojun Che, Yifan Chen, Daniel Zhengyu Huang, Xinying Mao, Weijie Wang

机构 * School of Mathematical Sciences, Peking University, Beijing, China(北京大学数学科学学院) Department of Mathematics, University of California, Los Angeles, CA, USA(加州大学洛杉矶分校数学系) Beijing International Center for Mathematical Research, Center for Machine Learning Research, Peking University, Beijing, China(北京国际数学研究中心,机器学习研究中心,北京大学,北京,中国)

专题命中 其他多模态 :multimodal(abstract)

AI总结 针对高斯混合黑箱变分推断的不稳定和低效问题,提出结合仿射不变预处理、无条件保持协方差正定性的指数积分器和自适应时间步长的稳定高效框架,并证明其收敛性。

Comments 41 pages, 10 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.29366 2026-05-29 cs.LG 50%

Solving Integer Linear Programming with Parallel Tempering

使用并行回火求解整数线性规划

Kyuil Sim, Sanghyeok Choi, Jinkyoo Park

机构 * KAIST(韩国科学技术院) University of Edinburgh(爱丁堡大学)

专题命中 其他多模态 :multimodal(abstract)

AI总结 提出一种无求解器、基于采样的整数线性规划优化框架,利用局部平衡提议和并行回火技术直接探索离散可行区域,在多个基准上优于或匹敌经典求解器。

Comments Preprint. Code available at https://github.com/ski-sim/ILP-with-ParallelTempering

详情

展开后加载摘要…

URL PDF HTML 收藏
2605.29308 2026-05-29 astro-ph.IM 50%

Development and demonstration of a Modular Astrobiological Experiments (MAEx) payload for autonomous biological monitoring in Low Earth Orbit (LEO)

模块化天体生物学实验(MAEx)载荷的研制与演示:用于低地球轨道(LEO)自主生物监测

Yamini Jangir, Samrat Ghosh, Vinay Nayaka, Mubashir Ali, Dharshan Hegde, Kunal Mooley, Arunima Saha, Hariharan VC, Sujata Malik, Amey Bagare, Saurav Mishra, Mukuljeet Singh Mehrolia, Saravanan Matheswaran, Ashwani Kumar Thakur

专题命中 其他多模态 :multimodal(abstract)

AI总结 本文介绍了一种紧凑型3U空间飞行载荷MAEx,通过集成成像、吸收/荧光光谱和电化学传感模块,实现了对微生物生长、细胞外电子传递和蛋白质聚集等生物过程的自主多模态监测,为空间生物学研究和轨道生物制造提供了通用平台。

Comments 26 main pages, 10 main figure, 4 Supplementary pages, 1 Supplementary Table, 4 Supplementary figures

详情

展开后加载摘要…

URL PDF HTML 收藏