[发明专利]视频全景拼接与三维融合方法及装置

说明书

本申请实施例提供一种视频全景拼接与三维融合方法及装置，方法包括：获取多个具有重叠区域的相邻摄像机的实时视频画面，并对所述实时视频画面进行图像预处理；对经过所述图像预处理后的实时视频画面进行特征提取和特征匹配，确定相邻两个所述实时视频画面的匹配特征点，并根据所述匹配特征点确定所述相邻两个实时视频画面的变换关系；对所述相邻两个实时视频画面进行色差优化处理，并根据变换关系对经过所述色差优化处理后的实时视频画面进行变形，得到对应的全景图像；通过三维融合技术将所述全景图像实时渲染到预设三维模型相应位置处进行显示；本申请能够有效解决视频不连续问题，增加视频可读性。

技术领域

本申请涉及视频处理领域，具体涉及一种视频全景拼接与三维融合方法及装 置。

背景技术

随着人们对生活和工作的环境的安全性要求的不断提高，建筑物的安全防范系统的重要性就越来越突出。其中，视频监控系统以其直观、方便、信息内容丰富 的特点越来越受到人们的重视，由此视频成为安全防范系统的重要组成部分。

综上所述传统监控在重要卡口或者区域所体现出的缺陷，亟需要提出一种改善方式，而近年来随着计算机、网络、图像处理、计算机图形学以及传输技术的发 展，视频监控技术也得到飞速发展。现在的许多监控依然是按照单个摄像机的方 式以9宫格或者更多的小视频展示在屏幕上，虽然摄像机覆盖范围广，但是每个 摄像机的画面存在不连贯，细节容易丢失，监控死角多、地理位置不明确等许多 问题，因此给犯罪分子提供了可乘之机。

发明内容

针对现有技术中的问题，本申请提供一种视频全景拼接与三维融合方法及装 置，能够有效解决视频不连续问题，增加视频可读性，使得使用人员可以实时掌 握全局，不漏过每一个监控角落，具有很大的实际应用价值。

为了解决上述问题中的至少一个，本申请提供以下技术方案：

第一方面，本申请提供一种视频全景拼接与三维融合方法，包括：

获取多个具有重叠区域的相邻摄像机的实时视频画面，并对所述实时视频画 面进行图像预处理；

对经过所述图像预处理后的实时视频画面进行特征提取和特征匹配，确定相 邻两个所述实时视频画面的匹配特征点，并根据所述匹配特征点确定所述相邻两 个实时视频画面的变换关系；

对所述相邻两个实时视频画面进行色差优化处理，并根据变换关系对经过所 述色差优化处理后的实时视频画面进行变形，得到对应的全景图像；

通过三维融合技术将所述全景图像实时渲染到预设三维模型相应位置处进行 显示。

进一步地，所述获取多个具有重叠区域的相邻摄像机的实时视频画面，并对 所述实时视频画面进行图像预处理，包括：

根据预设二维高斯滤波核函数对所述实时视频画面的各像素点的值进行平均 加权处理；

对经过所述平均加权处理后的实时视频画面进行灰度化处理，得到对应的灰度图像。

进一步地，所述对经过所述图像预处理后的实时视频画面进行特征提取和特 征匹配，确定相邻两个所述实时视频画面的匹配特征点，并根据所述匹配特征点 确定所述相邻两个实时视频画面的变换关系，包括：

对所述实时视频画面进行特征提取，得到对应的特征点和特征描述符；

对各所述特征点进行粗匹配，并根据所述特征描述符确定两个所述特征点之 间的汉明距离；

根据所述汉明距离进行精匹配，得到相邻两个所述实时视频画面的匹配特征 点；

根据所述匹配特征点和预设随机抽样一致算法确定所述相邻两个实时视频画 面的变换关系并保存。