Mind the Gap: Benchmarking LLM Uncertainty and Calibration with Specialty-Aware Clinical QA and Reasoning-Based Behavioural Features
注意差距:基于专业意识的临床QA和推理行为特征的LLM不确定性与校准基准测试
机构 * Department of Medical Informatics, Amsterdam University Medical Center, University of Amsterdam, Amsterdam, The Netherlands(医学信息学系,阿姆斯特丹大学医学中心,阿姆斯特丹大学,阿姆斯特丹,荷兰) ; Amsterdam Public Health, Methodology, Amsterdam, The Netherlands(阿姆斯特丹公共健康,方法学,阿姆斯特丹,荷兰)
专题命中 其他推理 :reasoning(title,abstract);分类 cs.CL
AI总结 本文通过评估不同临床专科和问题类型的LLM不确定性校准,提出基于行为特征的新型轻量方法,强调选择互补模型的重要性。
Comments Accepted at EACL 2026 (Main Conference)