Enjoy Your Talk: A Human-Centered Benchmark for Multi-Turn Dialogue with Decoupled User Simulation, Target Modeling, and Judging
享受你的对话:一个用于多轮对话的以人为本基准,具有解耦的用户模拟、目标建模和评判
机构 * SenseTime Research(商汤科技研究院) ; University of Science and Technology of China(中国科学技术大学) ; Tsinghua University(清华大学)
AI总结 该研究提出EYT-Bench基准,通过三方解耦设计评估大语言模型多轮对话能力,引入新指标,发现先进模型在主观维度相近但客观意图跟踪差异大,推理可提升客观跟踪,角色格式影响轨迹分布,且热身效应稳健。