Lying Is Just a Phase: The Hidden Alignment Transition in Language Model Scaling
说谎只是一个阶段:语言模型扩展中的隐藏对齐转变
机构 * ZEHEN Labs(ZEHEN实验室)
专题命中 幻觉与事实性 :alignment(title);分类 cs.CL、cs.AI、cs.LG
AI总结 通过分析63个基础模型,发现语言模型在特定规模阈值下,推理能力与真实性从反相关转变为正相关,并揭示了输出投影瓶颈和零竞争注意力头等内部机制。
Comments 15 pages, 8 figures, 2 tables. Companion paper: "The Growing Pains of Frontier Models: When Leaderboards Stop Separating and What to Measure Next." ( https://doi.org/10.48550/arXiv.2605.18840). Code: https://github.com/adilamin89/cape-scaling. Dashboard: https://zehenlabs.com/cape/