AssemLM: A Spatial Reasoning Multimodal Large Language Model for Robotic Assembly
AssemLM: 用于机器人装配的空间推理多模态大语言模型
机构 * Fudan University(复旦大学) ; Institute of Artificial Intelligence (TeleAI), China Telecom(人工智能研究所(TeleAI),中国电信) ; Tianjin University(天津大学) ; Northwestern Polytechnical University(西北工业大学) ; Tsinghua University(清华大学) ; City University of Hong Kong(香港城市大学)
专题命中 机器人数据与评测 :robotic(title,abstract);manipulation(abstract);分类 cs.RO
AI总结 提出AssemLM,一种融合装配手册、点云和文本指令的多模态大语言模型,通过专用点云编码器提取几何与旋转特征,实现精确的6D装配位姿推理,并构建含90万样本的AssemBench基准,在真实机器人装配任务中取得最优性能。
Comments Project Page: https://assemlmhome.github.io/