Second-Order Multi-Level Variance Correction for Modality Competition in Multimodal Models
二阶多级方差校正用于多模态模型中的模态竞争
机构 * University of Oxford, Oxford, United Kingdom(牛津大学,英国)
专题命中 其他图像生成 :image generation(abstract);分类 cs.CV
AI总结 本文提出ML-FOP-SOAP框架,通过多级方差校正提升多模态对齐稳定性,实验显示在Janus和Emu3数据集上,该方法提高了样本效率和训练速度,适用于大规模多模态基础模型。