Estimating Uncertainty in Classifier Performance with Applications to Large Language Models and Nested Data
分类器性能不确定性估计及其在大语言模型和嵌套数据中的应用
机构 * Department of Educational Psychology, Neag School of Education, University of Connecticut(康涅狄格大学尼格教育学院教育心理学系)
专题命中 知识编辑与模型理解 :large language model(title,abstract);language model(title,abstract);分类 cs.AI
AI总结 针对文本分类中性能指标置信区间报告不足且方法不当的问题,本文评估了多种区间估计方法,推荐了适用于小样本、低频构念和嵌套数据的准确方法。