One Token, Two Fates: A Unified Framework via Vision Token Manipulation Against MLLMs Hallucination
一个token,两种命运:通过视觉token操控构建统一框架以对抗大语言模型幻觉
机构 * National Key Laboratory for Novel Software Technology, Nanjing University, China(南京大学新型软件技术国家重点实验室) ; School of Computer Science and Engineering, Southeast University, China(东南大学计算机科学与工程学院)
专题命中 幻觉与鲁棒性 :LLaVA(abstract);MLLM(abstract);分类 cs.CV
AI总结 通过视觉token操控构建统一框架,有效减少大语言模型幻觉,提升POPE准确性2%。
Comments 10 pages