Proactive Agent Research Environment: Simulating Active Users to Evaluate Proactive Assistants
主动代理研究环境:模拟活跃用户以评估主动助手
机构 * University of California, Santa Barbara(加州大学圣塔芭芭拉分校) ; Apple, USA(苹果公司(美国)) ; University of Washington(华盛顿大学) ; Independent Researcher, USA(独立研究员(美国))
专题命中 Agent评测 :agent(title,abstract);分类 cs.AI、cs.LG
AI总结 本文提出Pare框架,通过状态机模拟用户交互,构建并评估主动代理,同时引入Pare-Bench基准测试143种不同任务,测试上下文感知、目标推理和多应用协调能力。
Comments 34 pages, 8 figures, 5 tables