MoRFI: Monotonic Sparse Autoencoder Feature Identification
MoRFI: 基于单调性的稀疏自编码器特征识别
机构 * University of Edinburgh, UK(爱丁堡大学) ; Heriot-Watt University, UK(赫瑞斯泰德大学)
AI总结 本文通过控制微调实验发现,逐步引入新知识会增加幻觉,提出MoRFI方法利用稀疏自编码器分析残差流激活,识别因果相关的潜在特征。
Comments Accepted to the Conference on Language Modeling (COLM) 2026