Safety-Preserving PTQ via Contrastive Alignment Loss
通过对比对齐损失实现安全性的PTQ
机构 * Seoul National University(首尔国立大学) ; LG Electronics(LG电子)
专题命中 安全训练 :alignment(title,abstract);safety(title,abstract);分类 cs.AI
AI总结 本文提出CAQ方法,通过引入对比对齐损失解决PTQ中安全对齐不足的问题,实现更稳健的4位量化,提升模型安全性而不牺牲通用能力。
Comments 9 pages, 4 figures. Includes 8 pages of supplementary material