Self-Consistent Latent Reasoning: Long Latent Sequence Reasoning for Vision-Language Model
自洽潜在推理:面向视觉语言模型的长潜在序列推理
机构 * University of Science and Technology of China(中国科学技术大学) ; Li Auto Inc.(利亚自动化公司)
AI总结 本文提出SCOLAR模型,通过轻量级detransformer生成辅助视觉token,结合三阶段SFT和ALPO强化学习,显著提升视觉语言模型的长序列推理能力,达到开源模型在现实任务中的最佳性能。
Comments 17 pages, 6 figures