DualToken: Towards Unifying Visual Understanding and Generation with Dual Visual Vocabularies
DualToken: 向通过双视觉词汇统一视觉理解和生成迈进
机构 * Zhejiang University(浙江大学) ; Shanghai Innovation Institute(上海创新研究院) ; Westlake University(西湖大学) ; Baichuan Inc.(北川科技) ; Peking University(北京大学) ; Xiaomi EV(小米电动车)
AI总结 DualToken通过双视觉词汇统一视觉理解和生成,解决了视觉理解和生成所需不同表示空间的挑战,提升了ImageNet上的重建质量和零样本准确率,并在下游任务中表现出色。