Diagnosing LLM Arbitration Behavior over Pre-evidence Epistemic States in RAG-based Fact-Checking
诊断基于RAG的事实核查中LLM对证据前认知状态的仲裁行为
机构 * Hong Kong Baptist University(香港 Baptist 大学) ; Singapore Management University(新加坡 Management 大学)
专题命中 RAG评测 :RAG(title,title_cn);分类 cs.AI
AI总结 提出PAVE测试平台,通过将LLM验证器分为四种认知状态,评估其在检索增强生成事实核查中仲裁参数知识与检索证据的能力,发现不可靠且高度依赖模型的仲裁行为,并提出轻量级JSD测试时仲裁方法。
Comments Accepted to ACL-2026 Findings (voluntarily withdraw)