PanoWorld: Real-World Panoramic Generation
全景世界:真实世界全景生成
发表机构 * Insta360 Research(影石创新科技研究院) ; Institute of Automation Chinese Academy of Sciences(中国科学院自动化研究所) ; Tsinghua University(清华大学) ; Wuhan University(武汉大学) ; UC Merced(加州大学默塞德分校)
AI总结 该研究旨在解决全景世界模型的远程记忆挑战,提出PanoWorld,利用旋转等变特性简化相机轨迹,通过DPRC和GMA进行建模与记忆增强,经三阶段训练优化,构建World360数据集验证其有效性,优于其他方法且将公开模型、代码和数据集。
Comments Project page: https://lihaoy-ux.github.io/panoworld-page/ Code:https://github.com/Insta360-Research-Team/PanoWorld