The IOL-AI Challenge: An Open Challenge towards Advancing Linguistic Reasoning
IOL-AI挑战赛:一项旨在推进语言推理的开放挑战赛
机构 * University College London(伦敦大学学院) ; Meta ; CentraleSupélec(中央高等电力学院) ; McGill University(麦吉尔大学) ; Cohere Labs(Cohere实验室) ; Princeton University(普林斯顿大学) ; University of Amsterdam(阿姆斯特丹大学) ; Stockholm University(斯德哥尔摩大学) ; Faculty of Liberal Arts and Sciences(文理学院) ; Universidade Federal de Goiás(戈亚斯联邦大学)
AI总结 本文介绍基于2026年IOL个人赛未公开题目的IOL-AI挑战赛,评估含自动与评审团评分,测试显示模型能力不由规模决定,语言推理是泛化推理技能的强基准代理。