From Inpainting to Editing: Unlocking Robust Mask-Free Visual Dubbing via Generative Bootstrapping
从修复到编辑:通过生成性自举解锁鲁棒的无掩膜视觉配音
机构 * Tsinghua University(清华大学) ; Hong Kong University of Science(香港科学大学) ; The Chinese University of Hong Kong(香港中文大学)
专题命中 图像修复 :inpainting(title,abstract);diffusion(abstract);分类 cs.CV
AI总结 本文提出X-Dub框架,通过生成性自举实现无掩膜视觉配音,解决传统掩膜修复方法在时空上下文破坏和鲁棒性差的问题,提升唇形同步和视觉质量。
Comments Project Page: https://github.com/KlingAIResearch/X-Dub