ICAE-Bench: Evaluating Coding Agents as Interactive Project Builders
ICAE-Bench:将编码智能体评估为交互式项目构建者
机构 * Meituan(美团)
AI总结 研究针对编码智能体在交互式项目构建中作用转变,现有基准未跟上的问题,提出ICAE-Bench基准。从模糊需求出发,经自动化用户智能体模拟动态范式,引入避免需求模糊性、确保用户模拟质量、公平评估开放式仓库的关键设计。
大厂专区
ICAE-Bench:将编码智能体评估为交互式项目构建者
机构 * Meituan(美团)
AI总结 研究针对编码智能体在交互式项目构建中作用转变,现有基准未跟上的问题,提出ICAE-Bench基准。从模糊需求出发,经自动化用户智能体模拟动态范式,引入避免需求模糊性、确保用户模拟质量、公平评估开放式仓库的关键设计。