EMNLP

BLADE: Benchmarking Language Model Agents for Data-Driven Science

Ken Gu, Ruoxi Shang, Ruien Jiang, Keying Kuang, Richard-John Lin, Donghe Lyu, Yue Mao, Youran Pan, Teng Wu, Jiaqian Yu, Yikun Zhang, Tianmai M. Zhang, Lanyi Zhu, Mike A. Merrill, Jeffrey Heer, Tim Althoff

机构 * University of Washington（华盛顿大学） ； UC Berkeley（伯克利大学） ； New York University（纽约大学） ； Stanford University（斯坦福大学） ； University of British Columbia（不列颠哥伦比亚大学） ； Microsoft（微软） ； George Washington University（乔治·华盛顿大学） 纠错

Comments EMNLP 2024

Retracing the Past: LLMs Emit Training Data When They Get Lost

Myeongseob Ko, Nikhil Reddy Billa, Adam Nguyen, Charles Fleming, Ming Jin, Ruoxi Jia

机构 * Virginia Tech（弗吉尼亚理工大学） ； Cisco Research（思科研究） 纠错

Comments The 2025 Conference on Empirical Methods in Natural Language Processing

ECom-Bench: Can LLM Agent Resolve Real-World E-commerce Customer Support Issues?

Haoxin Wang, Xianhan Peng, Xucheng Huang, Yizhe Huang, Ming Gong, Chenghan Yang, Yang Liu, Ling Jiang

机构 * Xiaoduo AI Lab（小多人工智能实验室） ； Shanghai Jiao Tong University（上海交通大学） 纠错

Comments Accepted as a main conference paper at EMNLP 2025

Mechanisms vs. Outcomes: Probing for Syntax Fails to Explain Performance on Targeted Syntactic Evaluations

Ananth Agarwal, Jasper Jian, Christopher D. Manning, Shikhar Murty

机构 * Stanford University（斯坦福大学） 纠错

Journal ref Proceedings of the 2025 Conference on Empirical Methods in Natural Language Processing

InfiniBench: A Benchmark for Large Multi-Modal Models in Long-Form Movies and TV Shows

Kirolos Ataallah, Eslam Abdelrahman, Mahmoud Ahmed, Chenhui Gou, Khushbu Pahwa, Jian Ding, Mohamed Elhoseiny

机构 * KAUST（卡塔尔科技大学） ； Monash University（墨尔本大学） ； RICE University（里士满大学） 纠错

Comments Accepted for oral presentation at the EMNLP 2025 main conference

To Word Senses and Beyond: Inducing Concepts with Contextualized Language Models

Bastien Liétard, Pascal Denis, Mikaela Keller

机构 * University of Lille（里尔大学） ； Inria（法国国家信息与自动化技术研究院） ； CNRS（法国国家科学研究中心） ； Centrale Lille（里尔中央理工学院） ； UMR 9189 - CRIStAL 纠错

Comments Published in EMNLP 2024 main conference proceedings

Journal ref In Proceedings of the 2024 Conference on Empirical Methods in Natural Language Processing, pages 2684-2696 (2024)

Do they mean 'us'? Interpreting Referring Expressions in Intergroup Bias

Venkata S Govindarajan, Matianyu Zang, Kyle Mahowald, David Beaver, Junyi Jessy Li

Comments Accepted to Findings@EMNLP 2024

Journal ref Findings of the Association for Computational Linguistics: EMNLP 2024

Separate the Wheat from the Chaff: Winnowing Down Divergent Views in Retrieval Augmented Generation

Song Wang, Zihan Chen, Peng Wang, Zhepei Wei, Zhen Tan, Yu Meng, Cong Shen, Jundong Li

机构 * University of Virginia（弗吉尼亚大学） ； Arizona State University（亚利桑那州立大学） 纠错

Comments EMNLP Main 2025

GraphCheck: Multipath Fact-Checking with Entity-Relationship Graphs

Hyewon Jeon, Jay-Yoon Lee

机构 * Seoul National University（首尔国立大学） 纠错

Journal ref Findings of the Association for Computational Linguistics: EMNLP 2025, Suzhou, China, pp. 24728-24745

Mind the Blind Spots: A Focus-Level Evaluation Framework for LLM Reviews

Hyungyu Shin, Jingyu Tang, Yoonjoo Lee, Nayoung Kim, Hyunseung Lim, Ji Yong Cho, Hwajung Hong, Moontae Lee, Juho Kim

机构 * KAIST（韩国科学技术院） ； Huazhong University of Science and Technology（华中科技大学） ； LG AI Research（LG人工智能研究） ； University of Illinois Chicago（伊利诺伊大学香槟分校） 纠错

Comments EMNLP 2025 Oral

AIRepr: An Analyst-Inspector Framework for Evaluating Reproducibility of LLMs in Data Science

Qiuhai Zeng, Claire Jin, Xinyue Wang, Yuhan Zheng, Qunhua Li

机构 * Pennsylvania State University（宾夕法尼亚州立大学） ； Carnegie Mellon University（卡内基梅隆大学） ； International Monetary Fund（国际货币基金组织） 纠错

Comments Accepted to 2025 EMNLP findings

InterFeedback: Unveiling Interactive Intelligence of Large Multimodal Models via Human Feedback

Henry Hengyuan Zhao, Wenqi Pei, Yifei Tao, Haiyang Mei, Mike Zheng Shou

机构 * Show Lab, National University of Singapore（新加坡国立大学Show实验室） 纠错

Comments Accepted by EMNLP 2025 Findings

iTool: Reinforced Fine-Tuning with Dynamic Deficiency Calibration for Advanced Tool Use

Yirong Zeng, Xiao Ding, Yuxian Wang, Weiwen Liu, Wu Ning, Yutai Hou, Xu Huang, Duyu Tang, Dandan Tu, Bing Qin, Ting Liu

机构 * Harbin Institute of Technology SCIR Lab（哈尔滨工业大学SCIR实验室） ； Huawei Technologies Co., Ltd（华为技术有限公司） ； Shanghai Jiao Tong University（上海交通大学） ； University of Science and Technology of China（中国科学技术大学） 纠错

Comments EMNLP 2025

MMDocIR: Benchmarking Multimodal Retrieval for Long Documents

Kuicai Dong, Yujing Chang, Xin Deik Goh, Dexun Li, Ruiming Tang, Yong Liu

机构 * Huawei Technologies Co., Ltd.（华为技术有限公司） 纠错

Comments Paper accepted to EMNLP-2025(Main)

Learning to Adapt to Low-Resource Paraphrase Generation

Zhigen Li, Yanmeng Wang, Rizhao Fan, Ye Wang, Jianfeng Li, Shaojun Wang

机构 * Ping An Technology（平安科技） ； University of Bologna（博洛尼亚大学） 纠错

Journal ref Proceedings of the 2022 Conference on Empirical Methods in Natural Language Processing (EMNLP 2022), pages 1014 - 1022

TOBUGraph: Knowledge Graph-Based Retrieval for Enhanced LLM Performance Beyond RAG

Savini Kashmira, Jayanaka L. Dantanarayana, Joshua Brodsky, Ashish Mahendra, Yiping Kang, Krisztian Flautner, Lingjia Tang, Jason Mars

机构 * University of Michigan（密歇根大学） 纠错

Comments Proceedings of the 2025 Conference on Empirical Methods in Natural Language Processing: Industry Track

Benchmarking LLM Faithfulness in RAG with Evolving Leaderboards

Manveer Singh Tamber, Forrest Sheng Bao, Chenyu Xu, Ge Luo, Suleman Kazi, Minseok Bae, Miaoran Li, Ofer Mendelevitch, Renyi Qu, Jimmy Lin

机构 * University of Waterloo（滑铁卢大学） ； Vectara（Vectara公司） ； Iowa State University（爱荷华州立大学） ； Stanford University（斯坦福大学） 纠错

Comments EMNLP Industry Track 2025

Legal Fact Prediction: The Missing Piece in Legal Judgment Prediction

Junkai Liu, Yujie Tong, Hui Huang, Bowen Zheng, Yiran Hu, Peicheng Wu, Chuan Xiao, Makoto Onizuka, Muyun Yang, Shuyuan Zheng

机构 * Harbin Institute of Technology（哈尔滨理工大学） ； The University of Osaka（大阪大学） ； Zhejiang University（浙江大学） ； Tsinghua University（清华大学） 纠错

Comments Accepted for EMNLP 2025 Main Conference

Finetuning LLMs for Human Behavior Prediction in Social Science Experiments

Akaash Kolluri, Shengguang Wu, Joon Sung Park, Michael S. Bernstein

机构 * Stanford University（斯坦福大学） 纠错

Comments 16 pages, 5 figures

Journal ref Proceedings of the 2025 Conference on Empirical Methods in Natural Language Processing, pages 30084-30099

Selective Preference Optimization via Token-Level Reward Function Estimation

Kailai Yang, Zhiwei Liu, Qianqian Xie, Jimin Huang, Erxue Min, Sophia Ananiadou

机构 * National Centre for Text Mining, The University of Manchester（曼彻斯特大学文本挖掘中心） ； School of Artificial Intelligence, Wuhan University（武汉大学人工智能学院） ； Center for Language and Information Research, Wuhan University（武汉大学语言与信息研究中心） ； The Fin AI（Fin AI公司） ； Baidu Inc.（百度公司） ； Archimedes Research（阿基米德研究） 纠错

Comments Accepted by the EMNLP 2025 main conference

Journal ref https://aclanthology.org/2025.emnlp-main.359/

Post Persona Alignment for Multi-Session Dialogue Generation

Yi-Pei Chen, Noriki Nishida, Hideki Nakayama, Yuji Matsumoto

机构 * RIKEN AIP（日本理化学研究所Advanced Institute for Physical Research） ； The University of Tokyo（东京大学） 纠错

Comments EMNLP 2025 Findings

LexTime: A Benchmark for Temporal Ordering of Legal Events

Claire Barale, Leslie Barrett, Vikram Sunil Bajaj, Michael Rovatsos

机构 * School of Informatics, University of Edinburgh（爱丁堡大学信息学院） ； Bloomberg（布莱恩·布鲁克斯） 纠错

Comments EMNLP 2025 (Findings) long paper

Read Your Own Mind: Reasoning Helps Surface Self-Confidence Signals in LLMs

Jakub Podolak, Rajeev Verma

机构 * University of Amsterdam（阿姆斯特丹大学） 纠错

Comments Presented at UncertaiNLP Workshop at EMNLP 2025 https://aclanthology.org/2025.uncertainlp-main.21.pdf

Journal ref UncertaiNLP Workshop at Empirical Methods in Natural Language Processing 2025 (EMNLP 2025)

QG-CoC: Question-Guided Chain-of-Captions for Large Multimodal Models

Kuei-Chun Kao, Hsu Tzu-Yin, Yunqi Hong, Ruochen Wang, Cho-Jui Hsieh

机构 * Department of Computer Science, University of California, Los Angeles（计算机科学系，加州大学洛杉矶分校） 纠错

Comments 16 pages

Journal ref EMNLP 2025

From Insight to Exploit: Leveraging LLM Collaboration for Adaptive Adversarial Text Generation

Najrin Sultana, Md Rafi Ur Rashid, Kang Gu, Shagufta Mehnaz

机构 * The Pennsylvania State University（宾夕法尼亚州立大学） ； Dartmouth College（达特茅斯学院） 纠错

Comments Findings of the Association for Computational Linguistics: EMNLP 2025 (camera-ready)

PolyNorm: Few-Shot LLM-Based Text Normalization for Text-to-Speech

Michel Wong, Ali Alshehri, Sophia Kao, Haotian He

机构 * Apple（苹果公司） 纠错

Comments 9 pages including appendix. EMNLP 2025 Industry Track

ROBoto2: An Interactive System and Dataset for LLM-assisted Clinical Trial Risk of Bias Assessment

Anthony Hevia, Sanjana Chintalapati, Veronica Ka Wai Lai, Thanh Tam Nguyen, Wai-Tat Wong, Terry Klassen, Lucy Lu Wang

机构 * University of Washington（华盛顿大学） ； The Hospital for Sick Children（圣马可医院） ； University of Bologna（博洛尼亚大学） ； The Chinese University of Hong Kong（香港中文大学） ； University of Saskatchewan（萨斯喀彻温大学） 纠错

Comments EMNLP 2025 System Demonstration

TabDSR: Decompose, Sanitize, and Reason for Complex Numerical Reasoning in Tabular Data

Changjiang Jiang, Fengchang Yu, Haihua Chen, Wei Lu, Jin Zeng

机构 * Wuhan University（武汉大学） ； University of North Texas（北德克萨斯大学） ； Hubei University of Economics（湖北经济学院） 纠错

Comments Accepted to EMNLP 2025 Findings

Journal ref EMNLP 2025

FaStfact: Faster, Stronger Long-Form Factuality Evaluations in LLMs

Yingjia Wan, Haochen Tan, Xiao Zhu, Xinyu Zhou, Zhiwei Li, Qingsong Lv, Changxuan Sun, Jiaqi Zeng, Yi Xu, Jianqiao Lu, Yinhong Liu, Zhijiang Guo

机构 * UCLA（美国大学洛杉矶分校） ； CUHK（香港中文大学） ； HKUST (GZ)（香港科技大学（广州）） ； HKUST（香港科技大学） ； Tsinghua University（清华大学） ； ECNU（华东师范大学） ； NVIDIA（英伟达） ； UCL（伦敦大学学院） ； HKU（香港大学） ； University of Cambridge（剑桥大学） 纠错

Comments EMNLP 2025 (Findings)

Evaluating Large Language Models for Detecting Antisemitism

Jay Patel, Hrudayangam Mehta, Jeremy Blackburn

机构 * Binghamton University（宾夕法尼亚州立大学） 纠错

Comments Accepted to EMNLP 2025 Main Conference