BAS: A Decision-Theoretic Approach to Evaluating Large Language Model Confidence
BAS:一种基于决策理论的评估大语言模型置信度的方法
机构 * Department of Engineering Science, University of Oxford(牛津大学工程科学系) ; Oxford Suzhou Centre for Advanced Research(牛津大学苏州高等研究院)
AI总结 本文提出BAS,一种基于决策理论的评估方法,用于评估大语言模型置信度在不同风险偏好下的决策支持能力,揭示置信度与决策可靠性之间的关系,并展示如何通过干预提升置信度可靠性。
Comments 24 pages, 7 figures, 6 tables