智能科学与技术学报 ›› 2022, Vol. 4 ›› Issue (2): 233-245.doi: 10.11959/j.issn.2096-6652.202226

• 专题:自主智能体灵巧精准操作学习 • 上一篇    下一篇

基于触觉感知和伺服的物体三维边缘重建方法

胡静怡1,2, 崔少伟1,2, 张超凡1, 张伯约1, 王硕1,3,4   

  1. 1 中国科学院自动化研究所复杂系统管理与控制国家重点实验室,北京 100190
    2 中国科学院大学未来技术学院,北京 100049
    3 中国科学院大学人工智能学院,北京 100049
    4 中国科学院脑科学与智能技术卓越创新中心,上海 200031
  • 出版日期:2022-06-15 发布日期:2022-06-01
  • 作者简介:胡静怡(1997− ),女,中国科学院自动化研究所博士生,主要研究方向为机器人触觉主动感知
    崔少伟(1996− ),男,中国科学院自动化研究所博士生,主要研究方向为机器人触觉感知与灵巧操作
    张超凡(1998− ),女,中国科学院自动化研究所博士生,主要研究方向为机器人多模态感知与灵巧操作
    张伯约(1998− ),男,中国科学院自动化研究所博士生,主要研究方向为基于触觉的机器人的灵巧操作
    王硕(1973− ),男,博士,中国科学院自动化研究所复杂系统管理与控制国家重点实验室研究员,中国科学院大学人工智能学院首席教授,国家重点研发计划“智能机器人”重点专项总体组专家,国际标准化组织ISO/TC 299专家,中国机电一体化技术应用协会常务理事。主要从事机器人学习、视触融合灵巧操作、仿生机器鱼、水下机器人−作业臂系统等研究。在国内外期刊和会议上发表学术论文120余篇,合著图书4本,获授权发明专利21项、软件著作权12项,主持制定机器人国家标准2项。主持我国科学技术部科技创新2030—“新一代人工智能”重大项目“自主智能体灵巧精准操作学习方法研究与验证”、国家863计划项目、国家自然科学基金联合基金重点项目和面上项目、支撑计划项目、国际合作项目、北京市科学技术委员会项目等多项项目。曾获得国家自然科学奖二等奖1项,北京市科学技术奖一等奖1项,省部级二等奖4项,中国自动化学会技术发明奖一等奖1项,中国自动化学会科普奖1项。中国科学院、中国自动化学会、中国人工智能学会优秀博士论文指导教师,曾获得中国科学院大学“领雁银奖·振翅奖”
  • 基金资助:
    科技创新2030—“新一代人工智能”重大项目(2018AAA0103003);国家自然科学基金资助项目(U1913201)

3D edge reconstruction method based on tactile sensing and servo

Jingyi HU1,2, Shaowei CUI1,2, Chaofan ZHANG1, Boyue ZHANG1, Shuo WANG1,3,4   

  1. 1 The State Key Laboratory for Management and Control of Complex Systems, Institute of Automation, Chinese Academy of Sciences, Beijing 100190, China
    2 School of Future Technology, University of Chinese Academy of Sciences, Beijing 100049, China
    3 School of Artificial Intelligence, University of Chinese Academy of Sciences, Beijing 100049, China
    4 Center for Excellence in Brain Science and Intelligence Technology, Chinese Academy of Sciences, Shanghai 200031, China
  • Online:2022-06-15 Published:2022-06-01
  • Supported by:
    The National Key Research and Development Program of China(2018AAA0103003);The National Natural Science Foundation of China(U1913201)

摘要:

机器人的灵巧操作一直是机器人领域研究的前沿热点问题。在很多灵巧操作任务中,机器人不仅需要视觉反馈,指尖的触觉反馈也至关重要,尤其是在光照条件不佳等情况下。目前,利用触觉伺服对物体进行三维形状感知的工作仍然非常具有挑战性。平面的GelSight触觉传感器并不适用于对物体进行三维形状的感知。因此,对GelSight触觉传感器设计进行了改进,使其更适用于获取三维物体边缘信息。同时,提出一种基于触觉伺服的物体边缘跟踪控制策略和基于触觉点云的物体三维边缘重建方法,以支持机器人的三维物体灵巧操作策略生成。针对多种复杂三维边缘模型,通过机器人的触觉伺服跟踪和三维边缘重建实验验证了所提方法的有效性。

关键词: 触觉伺服, 触觉感知, 三维重建

Abstract:

The dexterous manipulation of robots has always been a hot topic in the field of robotics.In many dexterous manipulation tasks, robots need not only visual feedback, but also tactile feedback at the fingertips, especially in poor lighting conditions.Currently, 3D shape sensing of objects using tactile servo is still very challenging.The flat GelSight tactile sensors are not suitable for 3D shape sensing of objects.Therefore, the design of GelSight tactile sensor was improved to make it more suitable for the acquisition of edge information of 3D objects.At the same time, an object edge tracking control strategy based on tactile servo and a 3D object edge reconstruction method based on tactile point cloud were proposed to support the generation of dexterous manipulation strategies for robots.For a variety of complex 3D edge models, the effectiveness of the proposed method was verified by the tactile servo tracking and 3D edge reconstruction experiments.

Key words: tactile servo, tactile sensing, 3D reconstruction

中图分类号: 

No Suggested Reading articles found!