Disentangling MLP Neuron Weights in Vocabulary Space
解构词汇空间中的MLP神经元权重
机构 * Blavatnik School of Computer Science and AI, Tel Aviv University(特拉维夫大学布拉瓦特尼克计算机科学与人工智能学院)
专题命中 其他安全 :alignment(abstract);分类 cs.CL
AI总结 本文提出ROTATE方法,通过优化神经元权重旋转以最大化词汇空间的峰度,解构MLP神经元权重,揭示词汇通道,提升语言模型可解释性。
Comments Accepted at COLM 2026