Faithfulness as Information Flow: Evaluating and Training Faithful Chain-of-Thought Reasoning
忠实性作为信息流:评估与训练忠实的链式思维推理
机构 * Dept. CSE, Michigan State University(密歇根州立大学计算机科学系) ; Anthropic
专题命中 幻觉与事实性 :safety(abstract,abstract_cn);分类 cs.CL、cs.LG
AI总结 通过信息流视角提出基于充分性、完整性和必要性的框架,结合熵、掩码KL和梯度诊断评估链式思维忠实性,并引入更新时干预(如注意力掩码、反向梯度掩码等)训练更忠实的推理模型。