[发明专利]一种短视频检测和多分类方法、装置及存储介质

说明书

本发明公开了一种短视频检测和多分类方法，接收用户发送的短视频获取请求，从所述短视频中分离出短视频的视频图像帧以及该短视频中的语音信息，利用图像关键帧执行目标短视频检测和识别，构建多领域预警关键词库，利用两级关键词匹配实现预警短视频分类供用户查看。本发明利用图像处理技术和文本处理技术能够准确提取短视频中的蕴含的有效信息，提高短视频识别的准确度；并利用短视频中的图像帧、文字信息和语音信息对短视频进行检测，根据图像帧中蕴含的图像信息可检测出目标短视频，利用短视频中的多种文字信息实现多类型的突发预警短视频检测分类，并运用两级关键词匹配规则实现突发预警短视频的分类，提高了短视频的分类多样性和准确性。

技术领域

本发明涉及短视频检测与分类领域，特别涉及一种短视频检测和分类方法、装置及计算机存储介质。

背景技术

随着互联网通信技术和多媒体技术的迅速发展，数字视频已广泛传播于大量用户之间，尤其是各大短视频平台的出现，短视频已经成为人们获取娱乐和新闻的重要来源之一。然而，有些短视频属于异常短视频。因此如果对短视频不加以分类管理，不提前进行提醒，那么会存在一定影响。因此，如何对短视频内容的检测、监测、分类、提醒是本领域中迫切需求解决的技术难题。

如何对短视频内容检测涉及多种技术的交叉，其涉及短视频编解码技术、图像处理技术、语音处理技术、文本处理技术、数据库存储技术等等。而现有技术中，通常只涉及利用单一的技术对短视频内容进行简单粗分类，例如可利用图像识别技术将目标短视频分类、利用关键词识别的手段将预警短视频分类等等，很显然上述技术方案不能适应多种类型的短视频分类，同时由于检测手段的单一会导致准确度较低。因此，迫切需要一种针对短视频，进行检测和分类的技术，其不仅能对短视频进行多类型的检测分类，同时通过融合多种短视频中的信息提高短视频分类的准确度。

发明内容

有鉴于此，本发明提供了一种短视频检测和分类方法，可将短视频分类为目标视频和突发预警视频。一方面利用图像处理技术和文本处理技术能够准确提取短视频中的蕴含的有效信息，为短视频的分类提供多种图像信息和文本信息，提高短视频识别的准确度。另一方面充分利用短视频中的图像帧、文字信息和语音信息检测出异常视频，利用图像帧中蕴含的图像信息可检测出目标短视频，利用短视频中的多种文字信息，可实现多类型的突发预警短视频检测分类，并具体利用两级关键词匹配规则实现突发预警短视频的分类，提高了短视频的分类多样性和准确性。

本发明的一种短视频检测和分类方法，具体包括如下过程：

步骤1：接收用户发送的短视频获取请求，采用获取程序以消息队列请求的方式向短视频平台或者短视频网络存储数据库发送短视频获取请求，并接收获取结果；

步骤2：从所述短视频中分离出短视频的视频图像帧以及该短视频中的语音信息；

在提取视频图像帧之后，还包括执行如下步骤：将获取的每个短视频划分为多个片段，从每个片段中提取一个非边缘帧作为视频图像关键帧；将提取的多个视频图像关键帧构成该短视频的图像关键帧序列，并作为该短视频的图像帧对应保存到数据库，同时将对应的语音文件也对应保存到数据库，并可设置查询索引；

步骤3：执行目标短视频检测和识别，首先判断图像关键帧对应的人脸数量是否满足阈值条件，若是，则利用图像关键帧的多种特征信息判断该短视频是否为目标短视频，具体包括如下过程：

步骤3.1：人体肤色区域检测和肤色特征提取：利用人体肤色统计模型得到人体肤色区域；根据所述肤色区域，从所述肤色区域中提取多个特征值作为特征向量，其中特征值包括：肤色占整个图像的比例、肤色连通区域的个数；最大连通区域占整个图像的比例；

步骤3.2：人体姿态检测和特征提取：计算连续两帧图像的帧差图像，获取运动特征，并且与人体异常姿态特征库进行对比，得到最接近的人体姿态，并且将对应的直方图特征作为人体姿态特征：