AgentPulse: A Continuous Multi-Signal Framework for Evaluating AI Agents in Deployment
AgentPulse:一个连续多信号框架用于评估AI代理在部署中的表现
机构 * University of Pennsylvania(宾夕法尼亚大学) ; Columbia University(哥伦比亚大学) ; OpenMesh AI
AI总结 本文提出AgentPulse框架,通过18种实时信号评估50个AI代理在10种工作负载中的表现,揭示部署中的采纳、维护和体验信息,强调其作为方法论而非真实排名的价值。
Comments 19 pages, 5 figures, 9 tables. Preprint under review