Can Current Agents Close the Discovery-to-Application Gap? A Case Study in Minecraft
当前智能体能否缩小发现到应用的差距?Minecraft中的一个案例研究
机构 * University of California, Los Angeles(加州大学洛杉矶分校) ; Peking University(北京大学) ; Amazon(亚马逊)
专题命中 Agent评测 :agent(abstract);分类 cs.AI
AI总结 本文通过Minecraft中的SciCrafter基准测试,探讨了智能体在发现因果规律并将其应用于构建功能系统(发现-应用循环)方面的能力,发现前沿模型在该任务中的成功率约为26%,揭示了知识识别和问题提出能力成为当前AI的瓶颈。
Comments Preprint, under review. 41 pages. Project page: https://scicrafter-bench.github.io/. Code: https://github.com/scicrafter-bench/scicraft-bench