When Should Active RAG Retrieve? A Budget-Aware Evaluation of Utility, Calibration, and Cost
主动检索生成式人工智能何时应进行检索?效用、校准和成本的预算感知评估
机构 * Carnegie Mellon University(卡内基梅隆大学) ; University of Glasgow(格拉斯哥大学) ; Georgia Institute of Technology(佐治亚理工学院)
AI总结 研究主动检索生成式人工智能何时检索,通过将其重述为效用估计进行预算感知评估,并分离出相关三个问题,利用多种方法实现,在多数据集和模型中验证,强调评估应报告多方面指标。
Comments Accepted at the ACM SIGKDD KDD 2026 Workshop on Evaluation and Trustworthiness of Agentic AI; 7 pages, 1 figure, and 4 tables