[发明专利]鱼眼相机图片中目标检测矫正的方法与系统

说明书

本发明提供一种鱼眼相机图片中目标检测矫正的方法与系统，包括：接收鱼眼相机的视频流输入，通过帧处理获得检测用鱼眼图片；检测鱼眼中照片中的行人目标；以检测结果的目标框为基础，将目标框进行扩边抠取，作为感兴趣区域ROI；获取目标框中心点与鱼眼图片中心点的竖向夹角；根据所述竖向夹角和旋转中心确定旋转矩阵，其中以所述目标框中心点作为旋转中心；利用旋转矩阵对感兴趣区域ROI进行仿射变换获得新的感兴趣区域new_ROI；获取目标框在新的感兴趣区域new_ROI中位置；新的感兴趣区域new_ROI中的目标框再次抠取，输出新的图片作为目标识别的输入图片。本发明根据目标在鱼眼图片中的位置，将目标旋转正向将旋转的目标矫正正向，便于目标的识别。

技术领域

本发明涉及图像处理技术领域，具体而言涉及一种鱼眼相机图片中目标检测矫正的方法与系统。

背景技术

在目前安防领域中，因为鱼眼镜头视角范围广，通常会使用其作为视频流采集工具。但在实际应用鱼眼镜头过程中存在图像畸变的问题，并且越远离图片中心畸变越严重。同时，鱼眼镜头中的目标旋转角度各异，旋转的目标不便于识别。这两种问题带来了一定的识别困难。

目前最常见的解决办法是使用标定方法获取鱼眼镜头相机内参后将鱼眼畸变图片矫正，再使用矫正后的图片进行处理。该解决方法的缺点在于矫正的结果并非完全将畸变图片矫正正确，同时不同的相机镜头因安装不一致会导致内参存在差异，使得不同的相机不能复用同一套标定参数。同时，对矫正后的图片的深度学习图像检测和识别方法是基于图像的像素值，矫正后的图片并没有增加额外的目标像素信息，因此就算使用矫正后的图片进行检测和识别，基本没有增益。

在识别任务中，目标为正向的识别通过率一般比其他旋转角度高，为提升识别精度，需将目标旋转至正向。

发明内容

本发明目的在于提供一种鱼眼相机图片中目标检测矫正的方法与系统，利用鱼眼相机图片的特性，根据目标在图片中的位置，将目标旋转正向将旋转的目标矫正正向，便于目标的识别，尤其是行人检测与识别。

为实现上述目的，本发明的第一方面提出一种鱼眼相机图片中目标检测矫正的方法，包括以下步骤：

步骤1、接收鱼眼相机的视频流输入，通过帧处理获得检测用鱼眼图片；

步骤2、检测鱼眼中照片中的行人目标；

步骤3、以检测结果的目标框为基础，将目标框进行扩边抠取，作为感兴趣区域ROI；

步骤4、获取目标框中心点与鱼眼图片中心点的竖向夹角；

步骤5、根据所述竖向夹角和旋转中心确定旋转矩阵，其中以所述目标框中心点作为旋转中心；

步骤6、利用旋转矩阵对感兴趣区域ROI进行仿射变换获得新的感兴趣区域new_ROI；

步骤7、获取目标框在新的感兴趣区域new_ROI中位置；以及

步骤8、对新的感兴趣区域new_ROI中的目标框再次抠取，输出新的图片作为目标识别的输入图片。

根据本发明的第二方面还提出一种鱼眼相机图片中目标检测框矫正的系统，包括：

用于接收鱼眼相机的视频流输入，通过帧处理获得检测用鱼眼图片的模块；

用于检测鱼眼中照片中的行人目标的；

用于以检测结果的目标框为基础，将目标框进行扩边抠取，作为感兴趣区域ROI的模块；

用于获取目标框中心点与鱼眼图片中心点的竖向夹角的模块；

用于根据所述竖向夹角和旋转中心确定旋转矩阵的模块，其中以所述目标框中心点作为旋转中心；