Humans' ALMANAC: A Human Collaboration Dataset of Action-Level Mental Model Annotations for Agent Collaboration
人类的ALMANAC:用于智能体协作的动作级心智模型标注的人类协作数据集
机构 * Northeastern University(东北大学) ; University of Notre Dame(Notre Dame 大学) ; University of Waterloo(滑铁卢大学) ; Carnegie Mellon University(卡内基梅隆大学) ; Adobe(Adobe公司) ; Microsoft Research Asia(微软亚洲研究院)
专题命中 多智能体 :agent(title,abstract);tool use(abstract);planning(abstract);分类 cs.AI、cs.CL
AI总结 为解决当前LLM智能体缺乏协作中心智模型能力的问题,构建了基于Map Task的ALMANAC数据集,包含2987个协作动作及其心智模型标注,并评估了六种LLM在预测人类行为和心智模型上的表现。