Tora3: Trajectory-Guided Audio-Video Generation with Physical Coherence
Tora3:基于轨迹的音频视频生成与物理一致性
机构 * Alibaba Cloud Computing(阿里巴巴云 computing) ; Fudan University(复旦大学)
专题命中 视频生成 :video generation(title);分类 cs.CV、cs.MM
AI总结 Tora3通过引入轨迹作为共享的运动先验,提升音频视频生成的物理一致性,采用轨迹对齐的运动表示和混合流匹配方案,改进运动真实性和运动-声音同步性。
Comments 12 pages, 5 tables, 5 figures