[发明专利]面向联网监控视频分析的多路摄像头时间对齐方法与系统

权利要求书

1.一种面向联网监控视频分析的多路摄像头时间对齐方法，其特征在于，包括以下步骤：

1)从监控摄像头拉取视频流，以固定时长的离线视频的形式保存；

2)利用离线视频制作时间戳数据集，在视频各帧的对应监控时间位置进行图像识别，得到视频各帧对应的时间戳；

所述步骤2)中利用离线视频制作时间戳数据集，在视频各帧的对应监控时间位置进行图像识别，得到视频各帧对应的时间戳，具体如下：

2.1)获取视频各帧中对应监控时间位置的图像，并截取每个数字的图片；

2.2)对截取每个数字的图片，手动打上标签：0至9，作为训练数据；

2.3)利用一个三层的全连接神经网络进行训练，得到适用于当前环境的OCR数字识别的神经网络模型；

2.4)对视频的画面依照策略进行OCR时间识别，并将识别到的数字进行有序拼接，得到当前帧对应的时间戳；

3)确定离线视频的每秒帧率，将视频各帧的时间戳精确到毫秒，并且将视频各帧的时间戳结果以“帧号时间戳”的形式保存为该视频的时间戳文件；

4)同时开启多路摄像头画面时，查找每个摄像头对应视频的时间戳文件中首帧对应的时间戳，取最大时间戳记为T，使每个视频文件分别从T时刻对应的帧开始播放，完成多路摄像头播放起始时间对齐；

5)在同时播放多路视频的过程中，采用以下视频播放方法进行同步：设某一视频播放的当前帧帧号为F₀，当前帧所处的这一秒内实际有X帧画面，摄像头设置帧率为X₀，设F_N为该视频下次播放的对应的帧号，在时间为以F₀为标准的这一秒内，该视频帧号的增长值为X/X₀：

该视频下次播放的对应的帧号为：

F_N＝F₀+[X/X₀]；

当检测到进入新的一秒内时会重复上述操作。

2.根据权利要求1所述的面向联网监控视频分析的多路摄像头时间对齐方法，其特征在于，所述步骤5)中还包括轮询同步的步骤，每隔设定时间，根据各路视频正在播放时对应的帧号，在该视频的时间戳文件检索帧号对应的时间戳，根据检索结构检查各路视频是否同步，若不同步则会根据主画面对应时刻，来对副画面的各路摄像头进行强制同步。

3.根据权利要求1所述的面向联网监控视频分析的多路摄像头时间对齐方法，其特征在于，所述步骤1)中从监控摄像头拉取视频流是通过rtsp协议从摄像头拉取数据并解码。

4.一种面向联网监控视频分析的多路摄像头时间对齐系统，其特征在于，包括：

rtsp解码及视频保存模块，用于通过rtsp协议从摄像头拉取视频流数据并解码，以固定时长的离线视频的形式保存；

视频时间分析模块，用于利用离线视频制作时间戳数据集，在视频各帧的对应监控时间位置进行图像识别，得到视频各帧对应的时间戳；

所述视频时间分析模块中得到视频各帧对应的时间戳，具体如下：

1)获取视频各帧中对应监控时间位置的图像，并截取每个数字的图片；

2)对截取每个数字的图片，手动打上标签：0至9，作为训练数据；

3)利用一个三层的全连接神经网络进行训练，得到适用于当前环境的OCR数字识别的神经网络模型；

4)对视频的画面依照策略进行OCR时间识别，并将识别到的数字进行有序拼接，得到当前帧对应的时间戳；

并确定离线视频的每秒帧率，将视频各帧的时间戳精确到毫秒，并且将视频各帧的时间戳结果以“帧号时间戳”的形式保存为该视频的时间戳文件；

多路视频起始同步模块，用于同时开启多路摄像头画面时，查找每个摄像头对应视频的时间戳文件中首帧对应的时间戳，取最大时间戳记为T，使每个视频文件分别从T时刻对应的帧开始播放，完成多路摄像头播放起始时间对齐；

视频播放同步模块，包括轮询检查模块和差速轮播放模块；

所述差速轮播放模块，用于在同时播放多路视频的过程中，采用以下视频播放方法进行同步：设某一视频播放的当前帧帧号为F₀，当前帧所处的这一秒内实际有X帧画面，摄像头设置帧率为X₀，设F_N为该视频下次播放的对应的帧号，在时间为以F₀为标准的这一秒内，该视频帧号的增长值为X/X₀：

F_N＝F₀+[X/X₀]；

当检测到进入新的一秒内时会重复上述操作；

所述轮询检查模块，用于每隔设定时间，根据各路视频正在播放时对应的帧号，在该视频的时间戳文件检索帧号对应的时间戳，根据检索结构检查各路视频是否同步，若不同步则会根据主画面对应时刻，来对副画面的各路摄像头进行强制同步。