Bridging Modal Isolation in Interleaved Thinking: Supervising Modality Transitions via Stepwise Reinforcement
交错思维中的模态隔离桥接:通过逐步强化监督模态转换
机构 * Shanghai Artificial Intelligence Laboratory(上海人工智能实验室) ; Shanghai Jiaotong University(上海交通大学) ; Zhejiang University(浙江大学) ; University of Chinese Academy of Sciences(中国科学院大学)
AI总结 提出MoTiF框架,通过反射式SFT和Flow-GRPO优化模态转换保真度,解决交错思维中图像与文本脱节的模态隔离问题,提升跨模态一致性和任务准确性。
Comments 22 pages, 5 figures, 6 tables