Stream3D-VLM: Online 3D Spatial Understanding with Incremental Geometry Priors
Stream3D-VLM:基于增量几何先验的在线3D空间理解
机构 * Zhejiang University(浙江大学) ; Tencent Hunyuan(腾讯文汇) ; HKUST(香港科技大学) ; Shenzhen Loop Area Institute(深圳河套学院)
专题命中 空间理解 :spatial understanding(title,abstract);3D vision(abstract);分类 cs.CV
AI总结 提出在线3D视觉语言模型Stream3D-VLM,通过自回归流控制、轻量视觉-空间特征融合模块和几何自适应体素压缩,实现从流式视频中实时理解3D空间,并构建超百万在线3D问答数据集,在多项任务上超越现有模型。
Comments Project Page: https://stream3d-vlm.github.io/