event-based camera相关知识基础了解（学习更新中）

事件驱动相机与神经拟态视觉

原创已于 2022-07-10 23:04:19 修改 · 1.5k 阅读

3 ·

CC 4.0 BY-SA版权

文章标签：

#event-camera #DVS #基于事件驱动的相机的发展 #基础 #变化检测

于 2019-11-21 18:33:50 首次发布

action 专栏收录该内容

2 篇文章

订阅专栏

@event-based camera相关知识基础了解伴随我的学习进度，持续上传

一些常见的简称是什么意思

DVS ：Dynamic Vision Sensor（动态视觉传感器）。借用《An Event-Driven Multi-Kernel Convolution
Processor Module for Event-Driven Vision Sensors》中的表述：Example Event-Driven sensors are: simple luminance to frequency transformation sensors [1], time-to-first event coding sensors [2]–[4], foveated sensors [5], [6], temporal contrast vision sensors [7]–[11], motion sensing and computation systems [12], [13], and spatial contrast sensors [9], [10], [14]–[16], among many others. Of special interest for very high-speed applications are the so-called “Dynamic Vision Sensors” (DVS), where each pixel autonomously computes the normalized time derivative of the sensed light and provides an output
event with its coordinate when this amount exceeds a
preset contrast [7], [8], [11]. Fig. 1 illustrates the operation of such sensor when observing a 7.5 KHz spiral on an analog oscilloscope operated in x-y mode and stimulated with two phase shifted sinusoids of decreasing amplitude.

解释：参考http://www.sohu.com/a/300758196_100007727
神经拟态视觉传感器使用基于事件驱动的方式来捕捉场景中的动态变化。与传统相机不同，神经拟态视觉传感器没有 “帧” 的概念。当现实场景中发生变化时，神经拟态视觉传感器会产生一些像素级的输出（即事件），一个事件具体包括（t, x, y, p），这里的 x, y 为事件在2D空间的像素坐标，t为事件的时间戳，p为事件的极性。事件的极性代表场景的亮度变化: 上升（positive） or 下降 (negative)【所以，有的文章说是两个颜色一红（黄）以蓝或者是两个状态+1和-1都是代表场景的变化，而《A low power，fully event-based gesture recognition system》中最开始是+1-1和0三种状态，最后+1-1好像汇合成一种，也就是总共还是两种状态？？】。

LIF：Integrate-And-Fire Models（整合与激发神经元）

AER: address event processor vision sensors

基础知识