Beyond the Singular: Revealing the Value of Multiple Generations in Benchmark Evaluation
超越单极:在基准评估中揭示多代的价值
机构 * University of California Irvine(加州大学尔湾分校) ; Meta Central Applied Science(Meta中央应用科学)
AI总结 本文提出一种分层统计模型,通过整合基准特征和LLM随机性,提升基准评估准确性并减少方差,同时定义提示级难度分数并可视化提示难度与语义。
Comments 11 pages, 5 figures, accepted at the Findings of ACL 2026