Reasoning Within the Mind: Dynamic Multimodal Interleaving in Latent Space
思维中的推理:潜在空间中的动态多模态交错
机构 * University of California, Santa Barbara(加州大学圣塔芭芭拉分校) ; Stanford University(斯坦福大学) ; University of California, Santa Cruz(加州大学圣克鲁兹分校)
专题命中 推理与问题求解 :large language model(abstract);language model(abstract);分类 cs.CL
AI总结 本文提出DMLR框架,通过动态潜在策略梯度优化和视觉注入策略,在潜在空间中实现视觉与文本的动态交错推理,提升多模态推理性能并保持高效推理。