ProEvent: An Event-centric Benchmark for Proactive Agents
ProEvent:面向主动智能体的以事件为中心的基准测试
机构 * School of Computing, Peking University(北京大学计算机学院)
专题命中 推理评测 :reasoning(abstract);分类 cs.AI
AI总结 针对主动智能体研究忽视事件中心协助及评估难的问题,引入ProEvent基准测试,基于即时通讯聊天评估智能体维护用户时间表能力,实验发现当前智能体存在过度反应和事件取消处理难等问题,揭示了大语言模型的根本局限。