VidNum: Diagnosing VLM Failure Modes in Video-Grounded Numerical Reasoning
VidNum-1.4K:一个全面的视频基于数值推理基准
机构 * Department of Psychological and Cognitive Sciences, Tsinghua University(清华大学心理与认知科学系) ; Shenzhen Loop Area Institute(深圳河套学院)
专题命中 逻辑推理 :reasoning(title,abstract);chain-of-thought(abstract)
AI总结 本文提出VidNum-1.4K基准,通过1379个严格人工标注的视频问题对,评估视频基于的数值推理能力,揭示当前VLMs在多步骤逻辑推理上的不足。
Comments 7 pages, 5 figures