Sparse Spectral LoRA: Routed Experts for Medical VLMs
稀疏光谱LoRA:用于医学VLMs的路由专家
机构 * Concordia University(康考迪亚大学)
专题命中 医疗多模态 :radiology(abstract);分类 cs.CV
AI总结 本文提出MedQwen,一种参数高效的医学VLM,结合了光谱路由的专家混合(MoE)与理论支持的缩放规则,通过非重叠SVD段初始化专家,减少序列遗忘并提升医疗图像任务性能。
科学与医疗
医学智能、临床 AI、医学影像、病理、诊断和医疗健康大模型。
稀疏光谱LoRA:用于医学VLMs的路由专家
机构 * Concordia University(康考迪亚大学)
专题命中 医疗多模态 :radiology(abstract);分类 cs.CV
AI总结 本文提出MedQwen,一种参数高效的医学VLM,结合了光谱路由的专家混合(MoE)与理论支持的缩放规则,通过非重叠SVD段初始化专家,减少序列遗忘并提升医疗图像任务性能。