Benchmarking Google Embeddings 2 against Open-Source Models for Multilingual Dense Retrieval and RAG Systems
Google Embeddings 2 与开源模型在多语言稠密检索和 RAG 系统中的基准测试
机构 * University of Salerno(萨勒诺大学) ; University of Bari(巴里大学)
专题命中 检索器与排序 :RAG(title,title_cn);dense retrieval(title);分类 cs.CL
AI总结 通过对比 Google Embeddings 2 与五个开源模型在 BEIR 子集、合成意大利语 RAG 语料库和分块消融实验上的表现,发现 GE2 在所有任务上排名第一但延迟高,而 mE5-L 在延迟敏感场景下是优选,LaBSE 表现最差,且所有模型在 32 令牌分块时性能饱和。
Comments 9 pages, 2 figures, 5 tables. Text and evaluation code available at https://github.com/cciro94/GoogleEmbeddings2-benchmark