arXivDaily arXiv每日学术速递 周一至周五更新

AI 大模型

多模态大模型

跨文本、图像、视频、音频等模态的大模型与学习方法。

2026-06-17 至 2026-06-17 共收录 5 信号源:cs.CV, cs.CL, cs.AI, cs.MM, eess.AS

1. 其他多模态 5 篇

2606.17118 2026-06-17 cs.LG cs.AI 新提交 83%

MODE: Modality-Decomposed Expert-Level Mixed-Precision Quantization for MoE Multimodal LLMs

MODE: 面向MoE多模态大语言模型的模态分解专家级混合精度量化

Yuanteng Chen, Peisong Wang, Zhilei Liu, Nanxin Zeng, Yuantian Shao, Shiqiang Lang, Tao Liu, Chuangyi Li, Qinghao Hu, Gang Li, Jing Liu, Jian Cheng

机构 * Institute of Automation, Chinese Academy of Sciences(中国科学院自动化研究所) School of Artificial Intelligence, University of Chinese Academy of Sciences(中国科学院大学人工智能学院) Zhongguancun Academy(中关村学院)

专题命中 其他多模态 :multimodal(title,abstract);cross-modal(abstract);分类 cs.AI

AI总结 针对MoE多模态大语言模型在专家重要性估计中存在的跨模态和视觉内偏差,提出模态分解的专家级混合精度量化框架MODE,通过分解选择频率、过滤冗余视觉令牌并评估模态敏感性,在给定预算下分配比特宽度,在W3A16下平均性能损失控制在2.9%以内。

Comments 18 pages, 8 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2601.00215 2026-06-17 cs.CV cs.CL 版本更新 81%

Disentangling Perception and Reasoning in Multimodal LLMs via Reward Design

通过奖励设计解耦多模态大语言模型中的感知与推理

Omar Sharif, Eftekhar Hossain, Nikhil Singh, Patrick Ng

机构 * Department of Computer Science, Dartmouth College(达特茅斯大学计算机科学系) Department of Computer Science, University of Central Florida(中央佛罗里达大学计算机科学系) Independent Researcher(独立研究者)

专题命中 其他多模态 :multimodal(title,abstract);分类 cs.CV、cs.CL

AI总结 研究多模态大模型中感知与推理的瓶颈,发现感知是主要约束,并通过奖励设计提升视觉基础推理,平均提升5.56分。

Comments 24 pages, 15 Figures, 10 Tables

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.17953 2026-06-17 cs.CV 新提交 70%

MLLMs Get It Right, Then Get It Wrong: Tracing and Correcting Late-Layer Textual Bias

MLLMs 先正确后错误:追踪并纠正后层文本偏见

Xingming Li, Ao Cheng, Qiyao Sun, Xixiang He, Xuanyu Ji, Runke Huang, Qingyong Hu

机构 * National University of Defense Technology(国防科技大学) Chinese University of Hong Kong, Shenzhen(香港中文大学(深圳)) Intelligent Game and Decision Lab(智能博弈与决策实验室)

专题命中 其他多模态 :multimodal(abstract);MLLM(abstract_cn);分类 cs.CV

AI总结 发现多模态大语言模型在中间层形成正确视觉预测,但最终输出时被文本覆盖,通过检测预测方向变化(85%失败转向文本,89%成功转向视觉)提出无训练方法CALRD,在冲突基准上提升高达9.4%。

Comments Accepted at IJCAI 2026. 16 pages, 10 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.17674 2026-06-17 astro-ph.GA 新提交 50%

TOPoS VII. Age-metallicity relation in the Galactic halo and assembly of the Milky Way

TOPoS VII. 银河晕中的年龄-金属丰度关系与银河系的组装

P. Bonifacio, Y. Lebreton, I. Koutsouridou, Y. Zou, D. Romano, S. Salvadori, L. Sbordone, L. Monaco, E. Caffau, M. Spite, P. François

专题命中 其他多模态 :multi-modal(abstract)

AI总结 利用TOPoS样本中次巨星的高精度Gaia视差和贝叶斯推断代码SPInS,结合BaSTI恒星演化轨迹,研究银河晕的年龄-金属丰度关系,发现多模态分布揭示了晕、厚盘和薄盘的三条年龄-金属丰度关系,并支持并合在银河系早期演化中的重要作用。

Comments Astronomy & Astrophysics - A&A, 2026

详情

展开后加载摘要…

URL PDF HTML 收藏
2505.16795 2026-06-17 gr-qc astro-ph.CO astro-ph.HE astro-ph.IM 版本更新 50%

Sequential simulation-based inference for extreme mass ratio inspirals

极端质量比旋近的序贯模拟推断

Philippa S. Cole, James Alvey, Lorenzo Speri, Christoph Weniger, Uddipta Bhardwaj, Davide Gerosa, Gianfranco Bertone

专题命中 其他多模态 :multi-modal(abstract)

AI总结 针对LISA等空间引力波探测中极端质量比旋近的搜索和参数估计难题,提出序贯模拟推断方法(截断边缘神经比率估计),将11维参数空间体积缩小10^6-10^7倍,并提供非自旋系统的1维边缘建议分布。

Comments 12 pages, 9 figures plus appendices, v2 matches published version

详情

展开后加载摘要…

URL PDF HTML 收藏