EPFL（洛桑联邦理工学院）

Bilinear Sequence Regression: A Model for Learning from Long Sequences of High-dimensional Tokens

Vittorio Erba, Emanuele Troiani, Luca Biggio, Antoine Maillard, Lenka Zdeborová

机构 * Statistical Physics of Computation Laboratory, École Polytechnique Fédérale de Lausanne (EPFL), Switzerland ； Department of Computing Sciences, Universita Bocconi, Milan, Italy ； Department of Mathematics, ETH Zürich, Switzerland 纠错

Journal ref Phys. Rev. X 15, 021092 (2025)

Building Conformal Prediction Intervals with Approximate Message Passing

Lucas Clarté, Lenka Zdeborová

机构 * École Polytechnique Fédérale de Lausanne (EPFL)（瑞士联邦理工学院（EPFL）） ； Statistical Physics of Computation laboratory（计算统计物理实验室） 纠错

Journal ref UAI 2025

Counting in Small Transformers: The Delicate Interplay between Attention and Feed-Forward Layers

Freya Behrens, Luca Biggio, Lenka Zdeborová

机构 * Statistical Physics of Computation Laboratory, Ècole polytechnique fédérale de Lausanne (EPFL), Lausanne, Switzerland（计算物理学实验室，瑞士洛桑联邦理工学院） ； Department of Computing Sciences, Università Bocconi, Milan, Italy（计算科学系，意大利博科尼大学） 纠错

Comments 9 pages main, 33 including appendix, ICML 2025

Journal ref ICML 2025

Fundamental computational limits of weak learnability in high-dimensional multi-index models

Emanuele Troiani, Yatin Dandi, Leonardo Defilippis, Lenka Zdeborová, Bruno Loureiro, Florent Krzakala

机构 * Statistical Physics Of Computation Laboratory, École Polytechnique Fédérale de Lausanne (EPFL)（计算物理实验室，洛桑联邦理工学院） ； Information Learning and Physics Laboratory, École Polytechnique Fédérale de Lausanne (EPFL)（信息学习与物理实验室，洛桑联邦理工学院） ； Departement d’Informatique, École Normale Supérieure, PSL & CNRS（信息学院，巴黎科学实验室与CNRS） 纠错

Journal ref AISTATS 2025

Exploring the Early Universe with Deep Learning

Emmanuel de Salis, Massimo De Santis, Davide Piras, Sambit K. Giri, Michele Bianco, Nicolas Cerardi, Philipp Denzel, Merve Selcuk-Simsek, Kelley M. Hess, M. Carmen Toribio, Franz Kirsten, Hatem Ghorbel

机构 * Haute Ecole Arc Ing\'enierie, University of Applied Sciences \& Arts Western Switzerland (HES-SO), Saint-Imier, Switzerland Département de Physique Théorique ； Centre Universitaire d’Informatique, Université de Genève, Genève, Switzerland Nordita, KTH Royal Institute of Technology ； Stockholm University, Hannes Alf\'vens v\"ag 12, SE-106 91 Stockholm, Sweden Institute for Particle Physics \& Astrophysics, ETH Zurich, Wolfgang-Pauli-Str 27, 8093 Zurich, Switzerland Laboratoire d’Astrophysique, Ecole Polytechnique Federale de Lausanne EPFL, Observatoire de Sauverny, Versoix 1290, Switzerland Centre for Artificial Intelligence, ZHAW Zurich University of Applied Sciences, Technikumstrasse 71, 8400 Winterthur, Switzerland Institute for Data Science, FHNW University of Applied Sciences \& Arts Northwestern Switzerland, Bahnhofstrasse 6, Windisch, 5210, Switzerland Department of Space, Earth ； Environment, Chalmers University of Technology, Onsala Space Observatory, SE-43992 Onsala, Sweden 纠错

Comments EPIA 2025 preprint version, 12 pages, 3 figures

Journal ref Valente de Oliveira, J., Leite, J., Rodrigues, J., Dias, J., Cardoso, P. (eds) Progress in Artificial Intelligence. EPIA 2025. Lecture Notes in Computer Science(), vol 16121. Springer, Cham

FedMAC: Tackling Partial-Modality Missing in Federated Learning with Cross-Modal Aggregation and Contrastive Regularization

Manh Duong Nguyen, Trung Thanh Nguyen, Huy Hieu Pham, Trong Nghia Hoang, Phi Le Nguyen, Thanh Trung Huynh

机构 * Hanoi University of Science and Technology（河内科学技术大学） ； Nagoya University（名古屋大学） ； Washington State University（华盛顿州立大学） ； Swiss Federal Institute of Technology Lausanne（洛桑联邦理工学院） 纠错

Comments The 22nd International Symposium on Network Computing and Applications (NCA 2024)

Zooming into Comics: Region-Aware RL Improves Fine-Grained Comic Understanding in Vision-Language Models

Yule Chen, Yufan Ren, Sabine Süsstrunk

机构 * School of Computer and Communication Sciences, EPFL（瑞士联邦理工学院计算机与通信科学学院） ； Department of Computer Science and Engineering, Chalmers University of Technology（楚科奇技术大学计算机科学与工程系） ； IVRL, EPFL（EPFL智能机器人实验室） 纠错

Role of scrambling and noise in temporal information processing with quantum systems

Weijie Xiong, Zoë Holmes, Armando Angrisani, Yudai Suzuki, Thiparat Chotibut, Supanut Thanasilp

机构 * Institute of Physics, Ecole Polytechnique F\' e d\' e rale de Lausanne (EPFL), Lausanne, Switzerland ； Centre for Quantum Science ； Engineering, Ecole Polytechnique F\' e d\' e rale de Lausanne (EPFL), Lausanne, Switzerland ； Complex Systems Lab, Department of Physics, Faculty of Science, Chulalongkorn University, Bangkok, Thailand 纠错

Comments 11+41 pages, 6+6 figures, 1 table

Using Large Multimodal Models to Extract Knowledge Components for Knowledge Tracing from Multimedia Question Information

Hyeongdon Moon, Richard Davis, Seyed Parsa Neshaei, Pierre Dillenbourg

机构 * EPFL（瑞士联邦理工学院） ； KTH Royal Institute of Technology（皇家理工学院） 纠错

Comments Accepted to Educational Data Mining 2025

Nunchi-Bench: Benchmarking Language Models on Cultural Reasoning with a Focus on Korean Superstition

Kyuhee Kim, Sangah Lee

机构 * EPFL Lausanne, Switzerland（洛桑联邦理工学院） ； Seoul National University（首尔国立大学） 纠错

Dark Noise Diffusion: Noise Synthesis for Low-Light Image Denoising

Liying Lu, Raphaël Achddou, Sabine Süsstrunk

机构 * School of Computer and Communication Sciences, École Polytechnique Fédérale de Lausanne（计算机与通信科学学院，瑞士联邦理工学院洛桑分校） 纠错

Image-driven Robot Drawing with Rapid Lognormal Movements

Daniel Berio, Guillaume Clivaz, Michael Stroh, Oliver Deussen, Réjean Plamondon, Sylvain Calinon, Frederic Fol Leymarie

机构 * Goldsmiths, University of London（伦敦大学金史密斯学院） ； Idiap Research Institute and École Polytechnique Fédérale de Lausanne (EPFL)（日内瓦联邦理工学院（EPFL）与IDIAP研究所） ； University of Konstanz（康斯坦茨大学） ； Ecole Polytechnique de Montréal（蒙特利尔联邦理工学院） 纠错

Comments Accepted at IEEE RO-MAN 2025

Challenges for AI in Multimodal STEM Assessments: a Human-AI Comparison

Aymeric de Chillaz, Anna Sotnikova, Patrick Jermann, Antoine Bosselut

机构 * EPFL（苏黎世联邦理工学院） 纠错

TAROT: Targeted Data Selection via Optimal Transport

Lan Feng, Fan Nie, Yuejiang Liu, Alexandre Alahi

机构 * EPFL（苏黎世联邦理工学院） 纠错

Advanced computer vision for extracting georeferenced vehicle trajectories from drone imagery

Robert Fonod, Haechan Cho, Hwasoo Yeo, Nikolas Geroliminis

机构 * KAIST（韩国科学技术院） ； EPFL（苏黎世联邦理工学院） 纠错

Journal ref Transportation Research Part C: Emerging Technologies, Vol. 178, p. 105205, 2025

Low-Perplexity LLM-Generated Sequences and Where To Find Them

Arthur Wuhrmann, Anastasiia Kucherenko, Andrei Kucharavy

机构 * École Polytechnique Fédérale de Lausanne（瑞士联邦理工学院） ； Institute of Entrepreneurship and Management, HES-SO Valais-Wallis（企业家与管理学院） ； Institute of Informatics, HES-SO Valais-Wallis（信息学院） 纠错

Comments Camera-ready version. Accepted to ACL 2025. 10 pages, 4 figures, 6 tables

Evaluating the Effectiveness of Direct Preference Optimization for Personalizing German Automatic Text Simplifications for Persons with Intellectual Disabilities

Yingqiang Gao, Kaede Johnson, David Froehlich, Luisa Carrer, Sarah Ebling

机构 * University of Zurich（苏黎世大学） ； EPFL（瑞士联邦理工学院） ； Zurich University of Applied Sciences（苏黎世应用科学大学） 纠错

Long-Context Linear System Identification

Oğuz Kaan Yüksel, Mathieu Even, Nicolas Flammarion

机构 * EPFL Lausanne, Switzerland（洛桑联邦理工学院） ； Inria – ENS Paris, France（法国巴黎国家科学研究中心 – 巴黎高等师范学院） 纠错

Comments Published at ICLR 2025. This version includes minor corrections and improved grammar from the published version. 34 pages, 4 figures

Journal ref O. K. Yüksel, M. Even, N. Flammarion, "Long-Context Linear System Identification", in The Thirteenth International Conference on Learning Representations, 2025

On the Trade-off between Flatness and Optimization in Distributed Learning

Ying Cao, Zhaoxian Wu, Kun Yuan, Ali H. Sayed

机构 * Institute of Electrical and Micro Engineering in EPFL（瑞士联邦理工学院电气与微电子工程学院） ； Sun Yat-sen University（中山大学） ； Center for Machine Learning Research (CMLR) in Peking University（北京大学机器学习研究中心） 纠错

IR3D-Bench: Evaluating Vision-Language Model Scene Understanding as Agentic Inverse Rendering

Parker Liu, Chenxin Li, Zhengxin Li, Yipeng Wu, Wuyang Li, Zhiqin Yang, Zhenyuan Zhang, Yunlong Lin, Sirui Han, Brandon Y. Feng

机构 * CUHK（香港中文大学） ； TJU（天津大学） ； EPFL（瑞士联邦理工学院） ； HKUST（香港科技大学） ； XMU（厦门大学） ； MIT（麻省理工学院） 纠错

Comments Project Page: https://ir3d-bench.github.io/

MARBLE: A Hard Benchmark for Multimodal Spatial Reasoning and Planning

Yulun Jiang, Yekun Chai, Maria Brbić, Michael Moor

机构 * EPFL（苏黎世联邦理工学院） ； ETH Zurich（苏黎世联邦理工学院） 纠错

Creativity in AI: Progresses and Challenges

Mete Ismayilzada, Debjit Paul, Antoine Bosselut, Lonneke van der Plas

机构 * EPFL, Università della Svizzera italiana (USI)（苏黎世联邦理工学院、瑞士联合大学） ； EPFL（苏黎世联邦理工学院） 纠错

Comments minor updates to content + contact information

Remove Symmetries to Control Model Expressivity and Improve Optimization

Liu Ziyin, Yizhou Xu, Isaac Chuang

机构 * Research Laboratory of Electronics, Massachusetts Institute of Technology（麻省理工学院电子研究实验室） ； Physics & Informatics Laboratories, NTT Research（NTT研究物理与信息实验室） ； Computer and Communication Sciences, École Polytechnique Fédérale de Lausanne（洛桑联邦理工学院计算机与通信科学） ； Department of Physics, Massachusetts Institute of Technology（麻省理工学院物理系） 纠错

Comments preprint

Demystifying Singular Defects in Large Language Models

Haoqi Wang, Tong Zhang, Mathieu Salzmann

机构 * EPFL（苏黎世联邦理工学院） ； School of Computer and Communication Sciences（计算机与通信科学学院） ； Swiss Data Science Center（瑞士数据科学中心） ； University of Chinese Academy of Sciences（中国科学院大学） 纠错

Comments ICML 2025

Do Vision-Language Models Have Internal World Models? Towards an Atomic Evaluation

Qiyue Gao, Xinyu Pi, Kevin Liu, Junrong Chen, Ruolan Yang, Xinqi Huang, Xinyu Fang, Lu Sun, Gautham Kishore, Bo Ai, Stone Tao, Mengyang Liu, Jiaxi Yang, Chao-Jung Lai, Chuanyang Jin, Jiannan Xiang, Benhao Huang, Zeming Chen, David Danks, Hao Su, Tianmin Shu, Ziqiao Ma, Lianhui Qin, Zhiting Hu

机构 * UC San Diego ； JHU Cornell Tech ； EPFL ； UMich 纠错

Comments ACL 2025 (Findings)

Advanced System Engineering Approaches to Emerging Challenges in Planetary and Deep-Space Exploration

J. de Curtò, Cristina LiCalzi, Julien Tubiana Warin, Jack Gehlert, Brian Langbein, Alexandre Gamboa, Chris Sixbey, William Maguire, Santiago Fernández, Álvaro Maestroarena, Alex Brenchley, Logan Maroclo, Philemon Mercado, Joshua DeJohn, Cesar Velez, Ethan Dahmus, Taylor Steinys, David Fritz, I. de Zarzà

机构 * Escuela Técnica Superior de Ingeniería (ICAI), Universidad Pontificia Comillas, 28015 Madrid, Spain Department of Computer Applications in Science \& Engineering, BARCELONA Supercomputing Center, 08034 Barcelona, Spain Dept. of Mechanical Engineering, University of Maryland, College Park, USA School of Engineering, EPFL, 1015 Lausanne, Switzerland College of Engineering, University of Michigan, Ann Arbor, USA Grainger College of Engineering, University of Illinois at Urbana-Champaign, USA Dept. of Mechanical Engineering, Iowa State University, USA Dept. of Mechanical Engineering, University of Wisconsin-Madison, USA Departamento de Informática e Ingeniería de Sistemas, Universidad de Zaragoza, 50009 Zaragoza, Spain Estudis d'Informàtica, Multimèdia i Telecomunicació, Universitat Oberta de Catalunya, 08018 Barcelona, Spain 纠错

Design Patterns for Securing LLM Agents against Prompt Injections

Luca Beurer-Kellner, Beat Buesser, Ana-Maria Creţu, Edoardo Debenedetti, Daniel Dobos, Daniel Fabian, Marc Fischer, David Froelicher, Kathrin Grosse, Daniel Naeff, Ezinwanne Ozoani, Andrew Paverd, Florian Tramèr, Václav Volhejn

机构 * Invariant Labs ； IBM ； EPFL（苏黎世联邦理工学院） ； ETH Zurich（苏黎世联邦理工学院） ； Swisscom（瑞士通信） ； Google（谷歌） ； ETH AI Center（苏黎世联邦理工学院人工智能中心） ； AppliedAI Institute for Europe（欧洲应用AI研究院） ； Microsoft（微软） ； Lakera 纠错

QT-DoG: Quantization-aware Training for Domain Generalization

Saqib Javed, Hieu Le, Mathieu Salzmann

机构 * CVLab, EPFL, Switzerland（EPFL计算机视觉实验室） ； Swiss Data Science Center, Switzerland（瑞士数据科学中心） 纠错

Comments Accepted at International Conference on Machine Learning (ICML) 2025. Project website: https://saqibjaved1.github.io/QT_DoG/

Distributional Reduction: Unifying Dimensionality Reduction and Clustering with Gromov-Wasserstein

Hugues Van Assel, Cédric Vincent-Cuaz, Nicolas Courty, Rémi Flamary, Pascal Frossard, Titouan Vayer

机构 * ENS de Lyon, CNRS, UMPA UMR 5669（里昂大学、国家科学研究中心、UMPA UMR 5669） ； EPFL, LTS4（苏黎世联邦理工学院、LTS4） ； Université Bretagne Sud, IRISA UMR 6074（布列塔尼南部大学、IRISA UMR 6074） ； École polytechnique, Institut Polytechnique de Paris, CMAP UMR 7641（巴黎高等学院、巴黎理工学院、CMAP UMR 7641） ； Inria, ENS de Lyon, CNRS, Université Claude Bernard Lyon 1, LIP UMR 5668（法国国家科学研究中心、里昂大学、 Claude Bernard Lyon 1 大学、LIP UMR 5668） 纠错

Comments 45 pages, 20 figures

FineWeb2: One Pipeline to Scale Them All -- Adapting Pre-Training Data Processing to Every Language

Guilherme Penedo, Hynek Kydlíček, Vinko Sabolčec, Bettina Messmer, Negar Foroutan, Amir Hossein Kargaran, Colin Raffel, Martin Jaggi, Leandro Von Werra, Thomas Wolf

机构 * Hugging Face ； EPFL（瑞士联邦理工学院） 纠错