物联网学报 ›› 2019, Vol. 3 ›› Issue (4): 63-71.doi: 10.11959/j.issn.2096-3750.2019.00133

• 理论与技术 • 上一篇    下一篇

神经形态视觉传感器及其应用研究

桑永胜1,李仁昊1,李耀仟1,王蔷薇2,毛耀3()   

  1. 1 四川大学计算机学院,四川 成都 610065
    2 四川旅游学院,四川 成都 610100
    3 中国科学院光电技术研究所,四川 成都 610209
  • 修回日期:2019-10-31 出版日期:2019-12-30 发布日期:2020-02-05
  • 作者简介:桑永胜(1974- ),男,四川绵阳人,四川大学计算机学院副教授,主要研究方向为类脑智能、机器视觉以及深度学习等|李仁昊(1997- ),男,北京人,四川大学计算金融专业学生,主要研究方向为计算机视觉、数据挖掘等|李耀仟(1997- ),男,广西崇左人,四川大学计算金融专业学生,主要研究方向计算机视觉、大数据分析。|王蔷薇(1981- ),男,四川绵阳人,四川旅游学院讲师,主要研究方向为智能数据分析。|毛耀(1978- ),男,四川眉山人,中国科学院光电技术研究所研究员,主要研究方向为光束控制及计算机管理技术,包括预测跟踪、惯性稳定、自主控制、机器视觉、强化学习等。
  • 基金资助:
    国家自然科学基金资助项目(U1831121);四川省重大科技专项(2019ZDZX0006);四川省重大科技专项(2018GZDZX0028)

Research on neuromorphic vision sensor and its applications

Yongsheng SANG1,Renhao LI1,Yaoqian LI1,Qiangwei WANG2,Yao MAO3()   

  1. 1 College of Computer Science,Sichuan University,Chengdu 610065,China
    2 Sichuan Tourism University,Chengdu 610100,China
    3 Institute of Optics and Electronics,Chinese Academy of Sciences,Chengdu 610209,China
  • Revised:2019-10-31 Online:2019-12-30 Published:2020-02-05
  • Supported by:
    The National Natural Science Foundation of China(U1831121);The Key S&T Special Projects of Sichuan(2019ZDZX0006);The Key S&T Special Projects of Sichuan(2018GZDZX0028)

摘要:

神经形态视觉传感器是一种模拟生物视觉系统工作机理的传感器,具有高时间分辨率、低时延、低功耗以及高动态范围等特点。首先,介绍了神经形态工程的研究背景、神经形态芯片以及神经形态视觉传感器的工作机理和主要优点。然后,详细介绍了神经形态视觉的主要计算方法,包括概率统计方法、脉冲神经网络方法以及深度神经网络方法等。最后,综述了神经形态视觉传感器在同步定位与地图构建、图像重建以及特征检测与跟踪等方面的应用研究。对神经形态视觉传感器从硬件、计算方法和应用等方面作了系统概述,为相关研究者提供了全面的参考。

关键词: 神经形态视觉传感器, 事件相机, 帧相机, 神经网络, 即时定位与地图构建, 图像重构

Abstract:

Neuromorphic vision sensor is a biologically inspired artificial neural system that mimics algorithmic behavior of biological vision systems,which has numerous advantages over standard vision sensors,such as high temporal resolution,low latency,low power,high dynamic range,etc.At first,a brief introduction to neuromorphic engineering,neuromorphic chips,and vision sensors was given.Then the main computing methods for neuromorphic vision were reviewed,including probability and statistics,spiking neural network and deep neural network.Finally,several kinds of applications based on neuromorphic vision sensors were given,such as simultaneous localization and mapping (SLAM),image reconstruction (IR),etc.A review of hardware,computing methods and applications for neuromorphic vision sensors was given,which provided a comprehensive reference for researchers.

Key words: neuromorphic vision sensor, event-based camera, frame-based camera, neural network, simultaneous localization and mapping, image reconstruction

中图分类号: 

No Suggested Reading articles found!