Learning-Zone Energy: Online Data Selection for Efficient RL Post-Training
学习区能量:用于高效RL后训练的在线数据选择
机构 * Dept. of Comp. Sci. & Tech.(计算机科学与技术系) ; Institute for AI(人工智能研究院) ; BNRist Center(BNRist中心) ; Tsinghua-Bosch Joint ML Center(清华大学-博世联合机器学习中心) ; THBI Lab(THBI实验室) ; Tsinghua University(清华大学) ; Dept. of Automation(自动化系)
专题命中 后训练与偏好优化 :post-training(title,abstract);large language model(abstract);language model(abstract);分类 cs.AI、cs.LG
AI总结 本文提出学习区能量(LZE)方法,通过在线数据选择框架集中计算在模型的主动学习前沿,提高RL后训练的效率,实验表明在多个数据集上表现优异,且计算资源消耗减少。