[发明专利]一种脉冲序列格式转换方法及系统

说明书

本发明公开了一种脉冲序列格式转换方法及系统，包括：对脉冲序列进行块划分；使用预定扫描顺序扫描每个块，得到每个块的二进制码表示；使用有损方法将所述二进制码转换为灰度图。本发明提出的方法使得脉冲序列能根据实际需要有损地转换为灰度图序列，从而能方便地通过现有视频编码标准压缩处理，并且复杂度较低，可以有效地应用在脉冲序列相关的压缩、传输、存储系统中。

技术领域

本发明属于数字信号处理领域，具体涉及一种由动态视觉传感器(DVS,dynamicvision sensors)记录的脉冲序列的转换方法及系统。

背景技术

动态视觉传感器通过模仿视网膜来感测和编码世界，并将之作为神经信号来获取视觉信息，所以动态视觉传感器是一种有前途的、可用于移动机器人的自主运动控制的神经形态视觉传感器。尽管研究人员已经使用各种传感器来感知环境，如基于帧的相机，结构光传感器和立体相机等，但仍然存在许多限制和缺陷。作为一个有希望的解决方案，动态视觉传感器通过模拟视网膜，并响应场景中的像素级亮度变化而产生的脉冲。与传统的基于帧的摄像机相比，特别是对于移动场，DVS在数据速率、速度和动态范围方面具有很大的优势。此外，由DVS产生的脉冲可以直接传送到脉冲神经网络(SNN，Spike Neural Network)，用于视觉处理和运动控制。

随着视频技术的发展，很多场景中对视频的动态范围和时间分辨率有着更高的需求，动态视觉感知器的优势在这些场景得以体现。传统摄像头的帧率一般为几十，更高的帧率往往会极大地提高技术和生产成本。而动态视觉传感器是记录反映运动信息的脉冲信号，帧率可以达到上万帧，在自动驾驶等高速运动摄影下有着广阔的应用前景。

动态视觉传感器是一种新型的类视网膜的视觉传感器。在动态视觉传感器中，每个像素点通过产生异步的事件独立地对亮度变化进行响应和编码，其产生的事件流在一定程度上消除了传统摄像机输出的连续图像中时域上的冗余；而且它具有极高的时间分辨率，可以捕获到超快速运动；另外，它具有非常高的动态范围，即在白天和黑夜都可以很好地工作。所以，动态视觉传感器也可以被应用在监控系统中。

DVS产生的脉冲信号一般以地址事件表示(AER,Address Event Representation)的形式存储，每一个数据都是由事件的地址(对应像素的位置)，以及事件的性质(变亮还是变暗)等组成。由于DVS脉冲序列帧率极高，在短时间内数据量很大，需要占用非常大的传输带宽，客观上对软硬件的要求太高。除此之外，现有的DVS脉冲序列处理方法，无法集成到最新的视频编解码标准中，无法进行后续的压缩等操作。

发明内容

本发明要解决的技术问题是如何将脉冲序列转换为能被现有编码标准兼容的视频序列。经过脉冲序列的块划分，再通过特定的扫描顺序，将脉冲信号合成为灰度图序列，使之能被现有视频编码标准兼容，直接使用现有压缩技术压缩。

具体的，根据本发明的一个方面，还提供了一种脉冲序列格式转换方法，包括：

对脉冲序列进行块划分；

使用预定扫描顺序扫描每个块，得到每个块的二进制码表示；

使用有损方法将所述二进制码转换为灰度图。

优选的，所述脉冲序列为由动态视觉传感器记录的脉冲序列。

优选的，所述块划分的过程如下：

将脉冲序列划分成若干m×n×l的大小相同的块，每个块中像素点的个数记为N_S，m，n，l的最小取值均为1，其中，

N_S＝m×n×l。

优选的，所述预定扫描顺序为逐行横向扫描或者逐行纵向扫描，经过扫描后，每个块表示为N_S个0和1的组合。

优选的，所述将所述二进制码有损转换为灰度图的过程如下：