Multimodal Hybrid Retrieval-Augmented Generation for Scientific Document Understanding using Open-Source SLMs
使用开源语言模型进行科学文档理解的多模态混合检索增强生成
专题命中 检索器与排序 :retrieval-augmented generation(title,abstract);hybrid retrieval(title);RAG(abstract);dense retrieval(abstract)
AI总结 针对科学文档理解中大型语言模型的问题,提出多模态混合检索增强生成系统。利用开源视觉语言模型生成摘要,结合多种检索方法并优化,采用查询压缩器确保连贯性。经评估,该系统提高了检索质量,验证了开源模型与先进策略结合的竞争力。
Comments 7 pages, 1 figure, 4 tables