Kernelized Advantage Estimation: From Nonparametric Statistics to LLM Reasoning
核化优势估计:从非参数统计到大语言模型推理
机构 * School of Management, University of Science and Technology of China(中国科学技术大学管理学院) ; Department of Statistics, London School of Economics and Political Science(伦敦政治经济学院统计系) ; School of Mathematics, University of Birmingham(伯明翰大学数学学院) ; Academy of Mathematics and Systems Science, Chinese Academy of Sciences(中国科学院数学与系统科学研究院) ; Department of Mathematics, Tsinghua University(清华大学数学系)
专题命中 推理与问题求解 :LLM(title,abstract);large language model(abstract);language model(abstract);分类 cs.LG
AI总结 本文提出利用非参数统计方法提升大语言模型推理中的优势估计,通过核平滑技术实现高效的价值函数估计与策略优化,提升政策学习质量。
Comments 45 pages, 5 figures