Apple-$π$: Benchmarking Thinking with Video Towards Law-Grounded Physical Intelligence
Apple-$π$:基于视频对基于法律的物理智能进行思维基准测试
机构 * S-Lab, Nanyang Technological University(南洋理工大学S-Lab) ; The Chinese University of Hong Kong(香港中文大学)
专题命中 机器人数据与评测 :world model(abstract);分类 cs.CV
AI总结 研究针对视频模型评估仅看输出层面的不足,提出Apple-PI基准,含数据集、协议和评估套件三部分,通过对11个模型测试发现其距可靠世界模拟器差距大,并揭示了一些瓶颈与差距,为指导视频模型发展提供诊断基础。