[发明专利]违规行为图像的检索方法、装置、设备及存储介质

说明书

本发明涉及人工智能领域，应用于智慧城市领域中，公开了一种违规行为图像的检索方法、装置、设备及存储介质，用于提高违规行为图像的检索效率。所述违规行为图像的检索方法包括：获取实时采集的行为监控音视频流，并对行为监控音视频流进行分帧处理，得到目标行为图像集；通过违规行为识别模型，对目标行为图像集进行违规行为检测，得到初始违规图像，并将初始违规图像存储至目标数据库；对待搜索语音数据进行语音识别，得到待搜索文本信息；通过自然语句转换模型，将待搜索文本信息转换为数据库查询语句，并从目标数据库中查找待搜索语音数据对应的目标违规图像。此外，本发明还涉及区块链技术，目标违规图像可存储于区块链节点中。

技术领域

本发明涉及检测模型领域，尤其涉及一种违规行为图像的检索方法、装置、设备及存储介质。

背景技术

许多场合对人们的行为有规范要求，如后厨要求厨师佩戴厨师帽和口罩、地铁站要求进站者佩戴口罩、医院要求医生穿制服等，在具有行为规范要求的场合，通常设置有监控设备，以便于进行有效的行为规范监管。

由于监控视频数据量大，监管部门对于行为规范的检测通常是通过对监控视频进行抽检完成，通过定期的采样检测识别一些违规行为图像，但是，这种方式难以全面地获得违规行为信息，并且基于传统的违规行为图像检索逻辑，使得违规图像的检索效率低下，存在监管不及时的问题。

发明内容

本发明提供了一种违规行为图像的检索方法、装置、设备及存储介质，用于提高违规行为图像的检索效率。

本发明第一方面提供了一种违规行为图像的检索方法，包括：

获取实时采集的行为监控音视频流，并对所述行为监控音视频流进行分帧处理，得到目标行为图像集；

通过预先训练好的违规行为识别模型，对所述目标行为图像集进行违规行为检测，得到初始违规图像，并按照预置数据结构将所述初始违规图像存储至目标数据库；

获取待搜索语音数据，并对所述待搜索语音数据进行语音识别，得到待搜索文本信息；

通过训练好的自然语句转换模型，将所述待搜索文本信息转换为数据库查询语句；

通过所述数据库查询语句，从所述目标数据库中查找所述待搜索语音数据对应的目标违规图像。

可选的，在本发明第一方面的第一种实现方式中，所述获取实时采集的行为监控音视频流，并对所述行为监控音视频流进行分帧处理，得到目标行为图像集，包括：

实时对监控摄像头采集的音视频流进行拉流处理，得到行为监控音视频流；

按照预置帧率，对所述行为监控音视频流进行分帧处理，得到初始行为图像集；

对所述初始行为图像集进行画面变动检测，得到检测结果，并通过所述检测结果对所述初始行为图像集进行降噪处理，得到目标行为图像集。

可选的，在本发明第一方面的第二种实现方式中，所述对所述初始行为图像集进行画面变动检测，得到检测结果，并通过所述检测结果对所述初始行为图像集进行降噪处理，得到目标行为图像集，包括：

对所述初始行为图像集进行灰度图像转换，得到多帧灰度图像，并提取各帧灰度图像中每个像素点的灰度值，得到各帧灰度图像对应的灰度值矩阵；

按照所述行为监控音视频流的分帧顺序，对相邻帧灰度图像对应的灰度值矩阵进行灰度差值计算，得到计算结果，并根据所述计算结果确定所述初始行为图像集中的静止画面图像和运动画面图像；

将所述初始行为图像集中的静止画面图像剔除，得到目标行为图像集。