Improved techniques for fine-tuning flow models via adjoint matching: a deterministic control pipeline
改进的流模型微调技术:通过伴随匹配实现确定性控制流程
机构 * Department of Industrial Engineering and Operations Research, Columbia University(工业工程与运筹学系,哥伦比亚大学)
AI总结 本文提出了一种确定性伴随匹配框架,将流基生成模型的人类偏好对齐问题转化为速度场上的最优控制问题,通过直接回归控制向量诱导的目标,实现简单稳定的训练目标,并通过截断伴随方案提升计算效率,同时保持对齐质量,实验显示在多个对齐指标上均取得一致提升。