Navigating by Old Maps: The Pitfalls of Static Mechanistic Localization in LLM Post-Training
用旧地图导航:在LLM微调中静态机械定位的陷阱
机构 * School of Computer Science and Technology(计算机科学与技术学院) ; Xi’an Jiaotong University(西安交通大学) ; School of Computer Science and Engineering(计算机科学与工程学院) ; The Chinese University of Hong Kong(香港中文大学) ; Shaanxi Co., Ltd(陕西有限公司) ; China Mobile Group(中国移动集团) ; College of Computing and Data Science(计算与数据科学学院) ; Nanyang Technological University(南洋理工大学)
专题命中 知识编辑与模型理解 :LLM(title,title_cn);post-training(title,abstract);large language model(abstract);language model(abstract)
AI总结 研究探讨了在LLM微调中静态机械定位的局限性,提出三种新指标分析电路演变,并强调需要前瞻性机制定位。
Comments 26 pages