CulMind: Benchmarking Multimodal Understanding and Reasoning in Chinese Cultural Heritage
CulMind:中国文化遗产中的多模态理解与推理基准
机构 * University of International Relations(国际关系学院) ; Kedge Business School(凯致商学院) ; Peking University(北京大学) ; Tsinghua University(清华大学) ; Beijing University of Posts and Telecommunications(北京邮电大学) ; Capital Normal University(首都师范大学)
专题命中 推理评测 :reasoning(title,abstract);分类 cs.CL
AI总结 针对现有基准忽视推理过程的问题,提出CulMind和CulMind-R基准,涵盖50个任务和24个推理子任务,并设计ReaScore指标评估推理质量,揭示答案与推理之间的差距。