"Did you lie?" Evaluating Lie Detectors across Model Scale and Belief-Verified Model Organisms
“你撒谎了吗?”评估不同规模模型和信念验证模型生物体的谎言检测器
机构 * AI Security Institute(AI安全研究所)
专题命中 其他推理 :CoT(abstract,abstract_cn);reasoning(abstract);chain-of-thought(abstract);分类 cs.AI
AI总结 本研究通过构建13个信念可验证的推理模型生物体和多样化提示撒谎测试集,评估了四种谎言检测器在不同规模模型上的表现,发现基于激活和概率的检测器在训练模型生物体上性能显著下降,而思维链法官保持较强性能,但存在伪影。
Comments 12 pages, 6 figures