[发明专利]基于事件的图像处理设备和方法

权利要求书

1.一种图像处理设备，包括：

传感器，感测与多个像素中的一个像素的亮度的改变相关的预定事件的发生，并且响应于感测到的发生，输出包括所述一个像素的位置信息的事件信号；

时间戳单元，通过将与事件信号相应的像素映射到从传感器输出事件信号的时间来产生时间戳信息，其中，与事件信号相应的像素是基于所述位置信息来确定的；

光流产生器，响应于由传感器输出事件信号，基于时间戳信息来产生光流。

2.如权利要求1所述的设备，其中，光流包括与事件信号相应的像素的速度矢量。

3.如权利要求1所述的设备，其中，光流产生器包括：

相邻像素获得单元，获得与事件信号相应的像素的相邻像素；

时间差计算单元，使用时间戳信息来计算与在与事件信号相应的像素和相邻像素之间的时间差相关的信息；

距离差计算单元，计算与在与事件信号相应的像素和相邻像素之间的距离差相关的信息；

光流计算单元，基于与时间差相关的信息和与距离差相关的信息来计算光流。

4.如权利要求3所述的设备，其中，当与事件信号相应的像素和相邻像素之间的时间差超出预定时间范围的窗口时，时间差计算单元计算出与时间差相关的信息是“0”。

5.如权利要求3所述的设备，其中，与距离差相关的信息包括与事件信号相应的像素和相邻像素之间的像素距离的倒数。

6.如权利要求3所述的设备，其中，光流计算单元使用与时间差相关的信息和与距离差相关的信息来计算和与事件信号相应的像素相应的二维矢量A，并执行将二维矢量A除以二维矢量A的内积值的运算以计算光流。

7.如权利要求1所述的设备，还包括：

运算单元，基于光流执行针对用于用户界面的信息的运算。

8.如权利要求7所述的设备，其中，用于用户界面的信息包括第一速度、第二速度、第三速度和第四速度中的至少一个，

其中，与所述多个像素相应的对象在与布置传感器的传感器平面平行的平面上以第一速度沿着x轴方向移动；

对象在所述平面上以第二速度沿着y轴移动；

对象以第三速度沿着垂直于所述平面的方向移动；

对象以第四速度在所述平面上旋转。

9.如权利要求8所述的设备，其中，运算单元包括：

平面速度运算单元，基于光流来执行关于第一速度和第二速度的运算；

光流中心运算单元，基于光流来执行关于光流的中心的运算；

z轴速度运算单元，基于光流和光流的中心来执行关于第三速度的运算；

角速度运算单元，基于光流和光流的中心来执行关于第四速度的运算。

10.如权利要求9所述的设备，其中，针对关于第一速度和第二速度的运算，平面速度运算单元执行关于光流的平均值的运算。

11.如权利要求9所述的设备，其中，针对关于光流的中心的运算，光流中心运算单元使用包括在光流中的像素的位置和像素的速度矢量的大小来执行关于光流的中心的运算。

12.如权利要求9所述的设备，其中，针对关于第三速度的运算，z轴速度运算单元使用光流的中心和与事件信号相应的像素的位置来产生与和事件信号相应的像素相应的第一矢量，并使用第一矢量与包括在光流中的与事件信号相应的像素的速度矢量来执行内积运算。

13.如权利要求9所述的设备，其中，针对关于第四速度的运算，角速度运算单元使用光流的中心和与事件信号相应的像素的位置来产生和与事件信号相应的像素相应的第一矢量，并使用第一矢量和包括在光流中的与事件信号相应的像素的速度矢量来执行向量积运算。

14.如权利要求1所述的设备，其中，时间戳信息包括与在所述多个像素中的每一个像素中发生预定事件的最近时间相关的信息。

15.如权利要求1所述的设备，其中，所述预定事件包括以下事件中的至少一个：

在单位时间段内所述一个像素的亮度增加大于或等于预定值的值的事件；

在单位时间段内所述一个像素的亮度减少大于或等于所述预定值的值的事件。

16.如权利要求1所述的设备，其中，传感器异步输出与所述多个像素中发生所述预定事件的像素的部分相应的事件信号。