[发明专利]全景视频序列图像的多目标对象跟踪系统

摘要

一种全景视频序列图像的多目标对象跟踪系统，包括用于获取大范围场景的全方位摄像装置和用于对全方位摄像装置所拍摄的全景图像进行视频分析处理的微处理器；在运动目标对象提取和简单多目标对象跟踪处理过程中，采用了一种计算复杂度不高、参数和阈值选取比较简单、便于在片上系统中实现的MHoEI算法；为了实现多目标对象在场景中发生遮挡、分离和合并等情况时进行有效的跟踪，依次根据匹配的结果分别通过目标对象的运动特征、颜色特征和形状特征进行跟踪，在改善了跟踪效率的同时也提高了多目标对象跟踪的鲁棒性。

主权项

一种全景视频序列图像的多目标对象跟踪系统，其特征在于：所述全景视频序列图像的多目标对象跟踪系统包括用以捕获到整个场景内目标对象的全景视频图像的全方位摄像装置，所述全方位摄像装置用ODVS表示，所述ODVS安置在监控场景的中部上方，所述ODVS通过USB接口与微处理器进行连接；所述的微处理器通过计算机网络与所述的PC机进行连接；所述的微处理器包括：视频图像读取单元，用于通过USB接口读取ODVS所拍摄的全景图像，并将读取的全景图像提交给视频图像展开单元和视频图像存储单元；视频图像展开单元，用于将全景图像进行柱状展开，展开后的全景柱状图像提交给目标对象检测单元；目标对象检测跟踪单元，用于检测在全景柱状展开图像中存在的移动目标对象，并用矩形框框住目标对象，用一种Motion History or Energy Images算法，以下简称MHoEI算法，用目标对象的运动历史和能量图像来提取和跟踪目标对象；所述的PC主要进行全景视频图像的形式化处理和行为语义化处理，多目标对象跟踪单元用于多目标对象在场景中发生遮挡、分离和合并等情况时进行有效的跟踪；所述的视频图像展开单元，用于将全景图像进行柱状展开，展开后的全景柱状图像提交给所述的目标对象检测跟踪单元；所述的目标对象检测跟踪单元，用于检测和跟踪在全景柱状展开图像中存在的运动目标对象，采用MHoEI算法对目标对象的运动历史和能量图像来提取和跟踪目标对象，得到感兴趣区域ROI、区域的质心坐标值以及区域框的大小值；这些目标对象的提取和跟踪数据并同全景视频图像以软件接口的方式通过网络递交给所述的多目标对象跟踪单元进行处理；所述的多目标对象跟踪单元，用于多目标对象在场景中发生遮挡、分离和合并等情况时进行有效的跟踪。