An Experimental Design Approach to Evaluating Agentic AI's Autonomous Model Discovery
一种评估智能体人工智能自主模型发现的实验设计方法
机构 * Department of Statistics, Virginia Tech(统计学系,弗吉尼亚理工学院) ; Department of Statistical Science, Baylor University(统计科学系,贝勒大学) ; Advanced Research Computing, Virginia Tech(高级研究计算,弗吉尼亚理工学院)
专题命中 推理评测 :reasoning(abstract);分类 cs.AI
AI总结 研究大型语言模型编码智能体自主模型发现行为,提出实验设计与分析框架,将智能体视为随机模型发现算子,在多种受控因素下研究Codex和Claude Code两个算子,进行回归模型和推理,开发规范分解,通过网络造词游戏测试平台得出相关深刻发现。
Comments 39 pages, 11 figures, 6 tables. Data and code available at the GitHub repository listed in the paper