Learning to Seek Help: Dynamic Collaboration Between Small and Large Language Models
学习寻求帮助:小语言模型与大语言模型之间的动态协作
机构 * Shanghai Jiao Tong University, Shanghai, China(上海交通大学) ; WeChat Tencent, Beijing, China(微信腾讯) ; State University of New York at Buffalo, New York, United States(纽约州立大学布法罗分校)
AI总结 本文提出动态协作框架,使小模型主动请求大模型进行多步推理,大模型提供适应性反馈,通过系统研究协作策略受模型能力与效率隐私约束的影响,实验表明动态策略优于静态流程和独立推理,并能稳健迁移至未见的大模型。
Comments 8 content pages