OmniRetriever: Any-to-Any Audio-Video-Text Retrieval via Fusion-as-Teacher Distillation
OmniRetriever: 通过融合作为教师蒸馏实现任意到任意的音频-视频-文本检索
机构 * Memories.ai Research(Memories.ai研究院)
专题命中 多模态RAG :RAG(abstract,abstract_cn)
AI总结 提出融合作为教师蒸馏方法,利用三元组嵌入的融合信号训练单模态嵌入,并构建OmniRetriever-7B模型,在零样本检索基准上超越现有方法,同时发布OmniRetriever-Bench基准。