[发明专利]一种基于边缘终端的智能视频分析方法及系统

说明书

本发明公开了一种基于边缘终端的智能视频分析方法及系统，包括：获取视频数据，基于视频数据，获取待分析图像数据；构建AI模型，通过层间融合技术对所述AI模型进行优化,通过优化后的AI模型对所述待分析样本数据进行推理，得到目标分析结果，对所述目标分析结果进行后处理，得到目标特征信息，以实现智能视频分析。本发明可以提高模型的推理速度，从而在边缘终端上满足实时性的需求。

技术领域

本发明属于视频分析与人工智能领域，特别是涉及一种基于边缘终端的智能视频分析方法及系统。

背景技术

随着社会经济的发展，传统的监控技术已经无法满足日益增长的需求，一方面，海量视频图像的实时监控、回放检索需要耗费大量人力，高度依赖监控人员的责任心、精神状态，而工作人员无法24小时盯着监控；事后回放观察，无法在第一时间就发现问题；视频内容复杂，信息量大，质量参差不齐，无法仔细辨别。另一方面，进行智慧视频分析需要部署基于深度学习的人工智能网络，这往往需要将现场的视频数据采集后发送到服务器端，在服务器端完成分析后将结果反馈给现场，因此无法在需求侧提供服务，较难满足实时性的要求。

因此，为了实现智慧视频分析，边缘智能终端是提供低延时智慧视频分析服务的最佳选择，边缘终端在现场完成数据采集、编解码、AI推理、智能分析等，将分析结果通过互联网进行传递反馈，从而满足各种定制化的需求。

然而，现有的边缘终端往往具有有限的计算能力，难以应对AI模型的推理计算，实时性难以达到要求。

发明内容

本发明的目的是提供一种基于边缘终端的智能视频分析方法及系统，以解决上述现有技术存在的问题。

为实现上述目的，一方面本发明提供了一种基于边缘终端的智能视频分析方法，包括：

获取视频数据，基于视频数据，获取待分析图像数据；

构建AI模型，通过层间融合技术对所述AI模型进行优化,通过优化后的AI模型对所述待分析图像数据进行推理，得到目标分析结果，对所述目标分析结果进行后处理，得到目标特征信息，以实现智能视频分析。

可选的，所述视频数据为一路视频数据或若干路视频数据。

可选的，所述待分析图像数据的获取过程包括：

对视频数据进行解码，获得图像帧；将图像帧进行分组，标注分组后的图像帧数据中的感兴趣区域，获得待分析图像数据。

可选的，所述AI模型采用深度学习模型。

可选的，对所述AI模型进行优化的过程包括：

对所述AI模型进行转换，得到基于TensorRT框架的AI模型；

通过层间融合技术对基于TensorRT框架的AI模型进行优化，得到优化后的AI模型。

可选的，对所述目标分析结果进行后处理的过程包括：

对目标分析结果进行线条及标签渲染，并将渲染后的目标分析结果进行分块处理，得到目标特征信息。

可选的，得到目标分析结果之后还包括：

对目标特征信息进行光流分析，获得目标特征信息的光流矢量，基于光流失量，计算得到目标特征速度以实现智能视频进一步分析。

另一方面，本发明还提供了一种基于边缘终端的智能视频分析系统，包括：

网络模块用于通过网络摄像头获取视频数据；

计算模块基于视频数据，获取待分析图像数据，并构建AI模型，通过层间融合技术对所述AI模型进行优化,通过优化后的AI模型对所述待分析图像数据进行推理，得到目标分析结果，对所述目标分析结果进行后处理，得到目标特征信息，以实现智能视频分析；