Can Editing 1 Neuron Fix Repetition Loops in LLMs?
编辑1个神经元能修复LLM中的重复循环吗?
机构 * Edgerunner AI
专题命中 病理影像 :pathology(abstract);分类 cs.LG
AI总结 本文发现Gemma 4模型在长事实列举任务中高达95%的概率陷入重复循环,通过逐层消融和逐神经元归因定位到少量MLP神经元,并用静态权重编辑(小至单个神经元符号反转)消除循环,但无法解决因知识缺失导致的“末日循环”。
科学与医疗
医学智能、临床 AI、医学影像、病理、诊断和医疗健康大模型。
编辑1个神经元能修复LLM中的重复循环吗?
机构 * Edgerunner AI
专题命中 病理影像 :pathology(abstract);分类 cs.LG
AI总结 本文发现Gemma 4模型在长事实列举任务中高达95%的概率陷入重复循环,通过逐层消融和逐神经元归因定位到少量MLP神经元,并用静态权重编辑(小至单个神经元符号反转)消除循环,但无法解决因知识缺失导致的“末日循环”。