The Maskability Index: Predicting Task-Objective Alignment in Pretrained Language Models
可掩码性指数:预测预训练语言模型中的任务目标对齐
机构 * Sirjan University of Technology(锡尔詹理工大学) ; Department of Computer Engineering(计算机工程系)
专题命中 安全评测 :alignment(title,abstract);分类 cs.CL、cs.AI
AI总结 研究提出可掩码性指数(MI),用于评估知识关系适合的提示方式,通过掩码与未掩码模板的DepthRank分数差异计算。在ATOMIC2020基准上评估发现MI与下游生成性能正相关,有助于选择提示模板和策略提取预训练语言模型的关系知识。