Universal Activation Verbalizer: A Unified Framework for Cross-Model Activation Explanation
通用激活词化器:跨模型激活解释的统一框架
机构 * New Jersey Institute of Technology(新泽西理工学院) ; University of North Carolina at Charlotte(北卡罗来纳大学夏洛特分校) ; Cisco Research(思科研究) ; The Chinese University of Hong Kong, Shenzhen(香港中文大学(深圳))
AI总结 提出通用激活词化器(UAV)框架,通过共享解码器和轻量适配器将异构模型的隐藏表示转化为自然语言解释,支持跨模型家族和规模的激活词化,在分类、事实检索和要点总结任务中与强基线竞争。
Comments 23 pages, 11 figures, 11 tables