Beyond Isolated Tasks: A Framework for Evaluating Coding Agents on Sequential Software Evolution
超越孤立任务:一个评估编码代理在连续软件演进中的框架
机构 * Fujitsu Research(富士通研究所)
专题命中 软件智能体 :coding agent(title,abstract);repository(abstract);分类 cs.SE、cs.AI
AI总结 本文提出一个框架,通过模拟真实开发者工作流程的两个现实场景,评估编码代理在连续任务中的表现,揭示孤立任务评估的局限性及多维评估的必要性。