Human Psychometric Questionnaires Mischaracterize LLM Behavior
人类心理测量问卷误判LLM行为
机构 * Graduate School of Data Science, Seoul National University(首尔国立大学数据科学研究生院) ; Department of Communication, Interdisciplinary Program in Artificial Intelligence, Seoul National University(首尔国立大学通信系人工智能交叉学科项目)
专题命中 其他LLM :LLM(title,title_cn);分类 cs.CL、cs.AI
AI总结 通过比较LLM在Likert问卷和生成概率上的价值与人格特征,发现问卷存在系统性偏差,提出基于生成概率的评估方法更准确。
Comments 38 pages, 6 figures