Online Learnability of Chain-of-Thought Verifiers: Soundness and Completeness Trade-offs
链式思维验证器的在线可学习性:正确性与完备性的权衡
机构 * Carnegie Mellon University(卡内基梅隆大学) ; Toyota Technological Institute at Chicago(芝加哥丰田技术研究所) ; Northwestern University(西北大学)
专题命中 推理与问题求解 :large language model(abstract);language model(abstract);分类 cs.LG
AI总结 本文提出一种在线学习框架,用于学习链式思维验证器,通过检查解决方案的正确性,解决生成器与验证器之间的反馈循环导致的分布偏移问题,并引入新的Littlestone维度扩展以优化验证器的学习。
Comments The abstract has been abridged due to arXiv length constraints