ConPress: Learning Efficient Reasoning from Multi-Question Contextual Pressure
ConPress: 从多问题上下文压力中学习高效推理
机构 * University of Chinese Academy of Sciences, Beijing, China(中国科学院大学) ; Microsoft, Beijing, China(微软) ; Tongji University, Shanghai, China(同济大学)
专题命中 测试时计算 :reasoning(title,abstract);chain-of-thought(abstract);CoT(abstract);分类 cs.CL
AI总结 提出ConPress方法,利用多问题提示诱导大推理模型自压缩推理链,通过自监督微调减少推理token使用,在保持精度的同时显著降低开销。