GradeLegal: Automated Grading for German Legal Cases
GradeLegal: 自动化评分德国法律案例
机构 * University of Passau(帕绍大学) ; Deggendorf Institute of Technology(德格多夫技术学院)
专题命中 推理评测 :reasoning(abstract);分类 cs.CL
AI总结 本研究探讨了大型语言模型能否用于自动化评分德国刑事和公法案例解决方案,通过系统评估27个专有和开源LLM,发现基于样本解决方案和评分标准的提示策略能有效模拟专家评分,尤其在公法领域达到0.91的QWK值,而在刑事法律领域仅为0.60,表明刑事法律评分任务更难。此外,集成方法能进一步提高评分一致性,并为更强的闭源单模型提供替代方案。