LMEB: Long-horizon Memory Embedding Benchmark
LMEB:长周期记忆嵌入基准
机构 * Harbin Institute of Technology (Shenzhen)(哈尔滨工业大学(深圳)) ; Shenzhen Loop Area Institute (SLAI)(深圳环湖研究院) ; Peking University(北京大学)
AI总结 本文提出LMEB基准,用于评估复杂长周期记忆检索任务,涵盖22个数据集和193个零样本任务,揭示大模型并不总优于小模型,且传统检索能力不等同于长周期记忆能力。
Comments 35 pages, 9 figures, 23 tables