EgoAERO: Learning Dexterous Manipulation from a Single Egocentric Video without Object Assets
EgoAERO:无需物体资产,从单个第一人称视频学习灵巧操作
机构 * School of Astronautics, Harbin Institute of Technology(哈尔滨工业大学航天学院) ; Lumos Robotic ; Suzhou Research Institute, Harbin Institute of Technology(哈尔滨工业大学苏州研究院) ; Shanghai Jiao Tong University(上海交通大学) ; Shanghai AI Lab(上海人工智能实验室) ; Nanjing University(南京大学) ; Xi’an Jiaotong-Liverpool University(西交利物浦大学) ; Fudan University(复旦大学)
专题命中 机器人操作 :manipulation(title,abstract);robot learning(abstract);分类 cs.RO、cs.AI
AI总结 提出EgoAERO框架,无需物体资产,从单个第一人称RGB-D视频中通过无资产物体跟踪与重建、自我运动补偿和自适应接触优化重建接触一致的手-物轨迹,并利用两阶段残差学习转化为机器人策略,实现单次演示的灵巧操作。