[发明专利]基于视频帧与脉冲阵列信号的联合目标检测方法与装置

权利要求书

1.一种基于视频帧与脉冲阵列信号的联合目标检测方法，其特征在于，包括：

将视频帧和脉冲阵列信号作为目标检测的输入；

将连续的脉冲阵列信号进行自适应划分；

根据视频帧频率与脉冲阵列信号划分频率的关系，进行同步融合或异步融合检测；

将视频帧与脉冲阵列信号以特征表达形式进行融合；

输出检测结果；

所述以特征表达形式进行融合为在检测前端融合或在检测算法中融合或在后端联合决策融合；其中，所述在检测前端融合为在输入检测算法前将视频帧和脉冲阵列进行融合，所述在检测算法中融合为在目标检测算法中将视频帧与脉冲阵列进行融合，所述在后端联合决策融合为将视频帧和脉冲阵列分别在检测算法中的检测结果进行决策输出。

2.根据权利要求1所述的方法，其特征在于，所述脉冲阵列信号为仿视网膜传感器采样的脉冲阵列信号，所述脉冲阵列信号表示为在时域和空域的三维空间稀疏离散点阵。

3.根据权利要求1所述的方法，其特征在于，所述将连续的脉冲阵列信号进行自适应划分包括依据脉冲时空特性进行自适应时间和空间的划分。

4.根据权利要求1所述的方法，其特征在于，所述的同步融合或异步融合检测，依据为脉冲阵列信号划分的频率与视频帧率是否一致，若脉冲阵列信号划分频率与视频帧率相同，则是同步融合；否则是异步融合。

5.根据权利要求1所述的方法，其特征在于，所述的在检测前端融合包括但不限于：

信号通道叠加，将视频帧的信号通道与脉冲阵列积分帧的通道进行叠加，生成融合帧；或

信号通道融合，将视频帧和脉冲阵列信号的积分帧采用互补方法或深度学习方法融合的方式，生成融合帧。

6.根据权利要求1所述的方法，其特征在于，所述的在后端联合决策融合包括但不限于：

裁判判决理论融合或贝叶斯理论决策融合。

7.一种基于视频帧与脉冲阵列信号的联合目标检测装置，其特征在于，包括：

输入模块，用于将视频帧和脉冲阵列信号作为目标检测的输入；

划分模块，用于将连续的脉冲阵列信号进行自适应划分；

检测模块，用于根据视频帧频率与脉冲阵列信号划分频率的关系，进行同步融合或异步融合检测；

融合模块，用于将视频帧与脉冲阵列信号以特征表达形式进行融合；

输出模块，用于输出检测结果；

所述以特征表达形式进行融合为在检测前端融合或在检测算法中融合或在后端联合决策融合；其中，所述在检测前端融合为在输入检测算法前将视频帧和脉冲阵列进行融合，所述在检测算法中融合为在目标检测算法中将视频帧与脉冲阵列进行融合，所述在后端联合决策融合为将视频帧和脉冲阵列分别在检测算法中的检测结果进行决策输出。

8.一种电子设备，其特征在于，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述程序，以实现如权利要求1-6中任一项所述的方法。

9.一种非临时性计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行，以实现如权利要求1-6中任一项所述的方法。