arXivDaily arXiv每日学术速递 周一至周五更新

AI 大模型

语言大模型 / LLM

大语言模型、预训练、指令微调、后训练和语言模型应用。

2026-06-25 至 2026-06-25 共收录 12 信号源:cs.CL, cs.AI, cs.LG

1. 知识编辑与模型理解 12 篇

2606.02867 2026-06-25 cs.MA cs.AI q-bio.PE 92%

The Epi-LLM Framework: probing LLM behavioral priors through epidemiological agent-based models

Epi-LLM框架:通过流行病学基于智能体的模型探究LLM行为先验

Petra Ferencz, Ava Keeling, Tobias O'Keefe, Lorenzo Stigliano, Francesco Di Lauro, Andres Colubri, Jasmina Panovska-Griffiths

机构 * Big Data Institute, Li Ka Shing Center for Health Information and Discovery, University of Oxford, Oxford, United Kingdom(大数据研究所、李嘉诚健康信息与发现中心、牛津大学、牛津、英国) Leverhulme Centre for Demographic Science, Nuffield Department of Population Health, University of Oxford, Oxford, United Kingdom(勒弗赫姆人口科学中心、努尔菲尔德人口健康系、牛津大学、牛津、英国) Pandemic Sciences Institute, Nuffield Department of Medicine, University of Oxford, Oxford, United Kingdom(流行病学科学研究所、努尔菲尔德医学系、牛津大学、牛津、英国) Department of Genomics and Computational Biology, UMass Chan Medical School, United States(基因组与计算生物学系、UMass Chan医学学校、美国) Broad Institute of Harvard and MIT, United States(哈佛大学和麻省理工学院Broad研究所、美国) The Queen’s College, University of Oxford, Oxford, United Kingdom(女王学院、牛津大学、牛津、英国)

专题命中 知识编辑与模型理解 :LLM(title,title_cn);large language model(abstract);language model(abstract);分类 cs.AI

AI总结 提出Epi-LLM框架,整合基于智能体的建模、真实流行病游戏和大语言模型,模拟疫情中智能体行为,发现LLM智能体减少峰值感染,感知健康严重性是隔离行为最强预测因子,且LLM架构影响疫情动态。

Comments Submitted to American Journal of Epidemiology

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.25182 2026-06-25 cs.CL cs.AI cs.LG 新提交 88%

What Intermediate Layers Know: Detecting Jailbreaks from Entropy Dynamics

中间层知道什么:从熵动力学检测越狱

Sofiia Nikolenko, Michele Papucci, Mina Rezaei, Shireen Kudukkil Manchingal

机构 * LMU Munich(慕尼黑大学) relAI – Konrad Zuse School of Excellence in Reliable AI(relAI – 康拉德·楚泽可靠人工智能卓越学校) University of Pisa(比萨大学) Munich Center for Machine Learning(慕尼黑机器学习中心) School of Engineering, Computing and Mathematics, Oxford Brookes University(牛津布鲁克斯大学工程、计算与数学学院)

专题命中 知识编辑与模型理解 :LLM(summary_cn,abstract);large language model(abstract);language model(abstract);分类 cs.CL、cs.AI、cs.LG

AI总结 通过分析冻结LLM各层的token级预测熵轨迹,发现中间层的熵动力学特征(如基于排名的单调趋势分数)能有效检测越狱攻击,且无需额外训练。

Comments Accepted at the European Conference on Machine Learning and Principles and Practice of Knowledge Discovery in Databases (ECML PKDD) 2026. A short version accepted at EIML@ICML 2026

详情

展开后加载摘要…

URL PDF HTML 收藏
2509.11132 2026-06-25 cs.SE 版本更新 86%

Rethinking Technology Stack Selection with AI Coding Proficiency

重新思考基于AI编程能力的技术栈选择

Xiaoyu Zhang, Weipeng Jiang, Shiqing Ma, Qingshuang Bao, Chenhao Lin, Chao Shen, Tianlin Li, Juan Zhai

专题命中 知识编辑与模型理解 :LLM(summary_cn,abstract);large language model(abstract);language model(abstract)

AI总结 提出AI编程能力概念,通过170个第三方库和6个LLM的实证研究发现,相似功能的库在LLM生成代码质量上差异高达84%,呼吁将AI编程能力纳入技术选择框架。

Comments 13 pages

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.24952 2026-06-25 cs.CL cs.AI cs.LG 新提交 85%

Perfect Detection, Failed Control: The Geometry of Knowing vs. Steering in Language Models

完美检测,控制失败:语言模型中知道与引导的几何学

Cosimo Galeone, Anna Ettorre, Minsu Park, Giuseppe Ettorre, Daniele Ligorio

机构 * Alomana

专题命中 知识编辑与模型理解 :language model(title);instruction tuning(abstract);pretraining(abstract);分类 cs.CL、cs.AI、cs.LG

AI总结 通过几何角度测量发现,语言模型中检测行为的表示方向与控制行为的方向存在显著偏差(余弦值约0.12),表明检测不等于可控性,且该偏差源于预训练。

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.24990 2026-06-25 cs.LG cs.AI 新提交 81%

Uncertainty-aware reinforcement learning for chemical language models

面向化学语言模型的不确定性感知强化学习

Borja Medina, Jon Paul Janet

机构 * Molecular AI, Discovery Sciences, BioPharmaceuticals R&D(分子人工智能、发现科学、生物制药研发)

专题命中 知识编辑与模型理解 :language model(title,abstract);分类 cs.AI、cs.LG

AI总结 提出两种将预测不确定性融入强化学习的方法,使化学语言模型更稳健地探索化学空间,在保持分子得分的同时将真实命中率从0.5提升至0.75。

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.23276 2026-06-25 cs.LG cs.AI cs.CR 新提交 79%

Exposing the Illusion of Erasure in Knowledge Editing for LLMs

揭露大语言模型知识编辑中的擦除幻象

Advik Raj Basani, Anshuman Chhabra

机构 * Birla Institute of Technology and Science, Goa(比拉理工学院与科学学院,果阿校区) University of South Florida(南佛罗里达大学)

专题命中 知识编辑与模型理解 :LLM(abstract,abstract_cn);prompting(abstract);分类 cs.AI、cs.LG

AI总结 本文从对抗性诱发角度揭示知识编辑并未真正擦除旧知识,而是将其重新分布并抑制表达,且易受间接提示和对抗攻击,证明知识编辑算法本质上可被绕过。

Comments Preprint, 26 pages + 22 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.25402 2026-06-25 cs.SE cs.AI 新提交 77%

LibEvoBench: Probing Temporal Knowledge Stratification in Code Generation Models

LibEvoBench:探测代码生成模型中的时间知识分层

Daniele Cipollone, Sergey Titov, Maliheh Izadi, Egor Bogomolov, Arie van Deursen

机构 * Faculty of EEMCS, Delft University of Technology, Delft, Netherlands(代尔夫特理工大学电子工程与信息科学学院) JetBrains Research, Amsterdam, Netherlands(JetBrains研究)

专题命中 知识编辑与模型理解 :LLM(summary_cn,abstract_cn);分类 cs.AI

AI总结 针对LLM在代码生成中因训练数据时间混合导致API版本混淆的问题,提出多版本基准LibEvoBench和新指标SEUS,揭示模型对版本不敏感且仅靠文档可提升准确性。

Comments Accepted at the DL4Code workshop at ICML 2026

详情

展开后加载摘要…

URL PDF HTML 收藏
2603.10371 2026-06-25 eess.AS cs.CL 版本更新 77%

Speech Codec Probing from Semantic and Phonetic Perspectives

从语义和语音角度探测语音编解码器

Xuan Shi, Chang Zeng, Tiantian Feng, Shih-Heng Wang, Jianbo Ma, Shrikanth Narayanan

机构 * University of Southern California(南加州大学) Dolby Laboratories(杜比实验室)

专题命中 知识编辑与模型理解 :LLM(abstract_cn);large language model(abstract);language model(abstract);分类 cs.CL

AI总结 本文通过三项任务系统分析多种语音分词器编码的信息,发现当前分词器主要捕获语音结构而非词汇语义,为下一代语音分词方法设计提供指导。

Comments Accepted by Interspeech 2026

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.24964 2026-06-25 cs.LG 新提交 70%

Evidence for feature-specific error correction in LLMs

LLMs中特征特定误差校正的证据

Francisco Ferreira da Silva, Stefan Heimersheim

机构 * Pivotal Research(Pivotal研究院)

专题命中 知识编辑与模型理解 :large language model(abstract);language model(abstract);分类 cs.LG

AI总结 通过激活扰动实验,发现LLMs的残差流激活对沿特征方向(对比对构造的“纯”方向)的扰动更鲁棒,且扰动效应满足p>2的Lp范数,表明存在特征特定的误差校正机制。

Comments 13 pages, 11 figures

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.24570 2026-06-25 cs.CV 新提交 67%

Jolia: Concept-Level Vision-Language Alignment for 3D CT Contrastive Learning

Jolia: 用于3D CT对比学习的概念级视觉-语言对齐

Julien Khlaut, Charles Corbière, Baptiste Callard, Amaury Prat, Leo Butsanets, Antoine Saporta, Théo Danielou, Leo Machado, Korentin Le Floch, Tom Boeken, Pierre Manceron, Corentin Dancette

机构 * Raidium Department of Vascular and Oncological Interventional Radiology, Hôpital Européen Georges Pompidou, AP-HP(欧洲乔治·蓬皮杜医院血管与肿瘤介入放射科,AP-HP) Faculté de Santé, Université Paris-Cité(巴黎西岱大学健康学院) HEKA, INRIA(HEKA,法国国家信息与自动化研究所) Imaging Department, Fondation Ophtalmologique Adolphe de Rothschild(阿道夫·罗斯柴尔德眼科基金会影像科)

专题命中 知识编辑与模型理解 :foundation model(abstract);pretraining(abstract)

AI总结 提出ConQuer方法,通过概念查询将报告拆分为特定概念部分,学习交叉注意力查询以匹配图像特征,实现概念级对齐,在胸部与腹部CT上训练的Jolia模型在多项任务中超越CLIP基线。

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.24997 2026-06-25 cs.LG 新提交 57%

What's in an Earth Embedding? An Explainability Analysis of Location Encoders

地球嵌入中有什么?位置编码器的可解释性分析

Livia Betti, Sebastian Ricke, Ivica Obadic, Adam J. Stewart, Esther Rolf

机构 * University of Colorado Boulder(科罗拉多大学博尔德分校) Technical University of Munich(慕尼黑工业大学) Munich Center for Machine Learning(慕尼黑机器学习中心)

专题命中 知识编辑与模型理解 :pretraining(abstract);分类 cs.LG

AI总结 通过稀疏自编码器、自然语言概念和视觉特征分解地理隐式神经表示的位置嵌入,揭示其编码的可解释地理结构。

详情

展开后加载摘要…

URL PDF HTML 收藏
2606.25713 2026-06-25 cs.SD 新提交 50%

Frequency-Aware Self-Supervised Music Representation Learning

频率感知的自监督音乐表示学习

Yicheng Gu, Junan Zhang, Jerry Li, Zhizheng Wu, Lauri Juvela

机构 * Spellbrush Acoustic Lab, Department of Information and Communications Engineering (DICE), Aalto University(阿尔托大学信息与通信工程系声学实验室) School of Data Science, The Chinese University of Hong Kong, Shenzhen(香港中文大学(深圳)数据科学学院)

专题命中 知识编辑与模型理解 :language model(abstract)

AI总结 提出PupuJEPA,一种直接在2D频谱图上训练的视觉联合嵌入预测架构,通过预测掩码补丁的潜在嵌入学习鲁棒表示,在MARBLE基准上线性探测优于1D序列SSL模型。

Comments Submitted to TASLP

详情

展开后加载摘要…

URL PDF HTML 收藏