[发明专利]目标行为的检测方法、装置及计算机可读存储介质

权利要求书

1.一种目标行为的检测方法，其特征在于，包括：

通过摄像设备获取视频流，并通过音频采集设备获取音频流；

基于所述视频流检测是否存在目标行为，并基于所述音频流检测是否存在所述目标行为；

在基于所述视频流和所述音频流都检测到存在所述目标行为的情况下，确定检测到所述目标行为；

其中，在基于所述视频流和所述音频流都检测到存在所述目标行为的情况下，确定检测到所述目标行为包括：在基于所述视频流和所述音频流都检测到存在所述目标行为、且所述视频流中目标对象的关键点的运动变化特征与所述音频流中的声音的声音变化特征相匹配的情况下，确定检测到所述目标行为；

其中，所述视频流中目标对象的关键点的运动变化特征与所述音频流中的声音的声音变化特征相匹配包括：所述关键点的往复运动的频率与所述声音的节律性重复的频率一致。

2.根据权利要求1所述的目标行为的检测方法，其特征在于，基于所述视频流检测是否存在目标行为包括：

检测并跟踪所述视频流中的目标对象；

提取所述视频流中所述目标对象的关键点，并判断所述视频流中所述目标对象的所述关键点的运动变化特征是否满足所述目标对象执行所述目标行为时所述关键点的运动变化特征；

根据是否满足所述目标对象执行所述目标行为时所述关键点的运动变化特征的判断结果，确定基于所述视频流是否检测到存在所述目标行为。

3.根据权利要求2所述的目标行为的检测方法，其特征在于，检测并跟踪所述视频流中的目标对象包括：

根据所述目标对象对应的目标特征，基于所述视频流检测所述目标对象，并在检测到所述目标对象的情况下获取目标对象区域；

使用背景建模方法获取所述目标对象的前景，在所述目标对象区域中对所述目标对象进行跟踪。

4.根据权利要求2所述的目标行为的检测方法，其特征在于，所述目标对象执行所述目标行为时所述关键点的运动变化特征包括：所述关键点存在往复运动。

5.根据权利要求1所述的目标行为的检测方法，其特征在于，基于所述音频流检测是否存在所述目标行为包括：

检测所述音频流中的声音的声音变化特征是否满足所述目标对象执行所述目标行为时声音的声音变化特征；

根据是否满足所述目标对象执行所述目标行为时声音的声音变化特征的判断结果，确定基于所述音频流是否检测到存在所述目标行为。

6.根据权利要求5所述的目标行为的检测方法，其特征在于，所述目标对象执行所述目标行为时声音的声音变化特征包括：所述声音存在节律性重复。

7.根据权利要求1至6中任一项所述的目标行为的检测方法，其特征在于，基于所述视频流检测是否存在目标行为，并基于所述音频流检测是否存在所述目标行为之前，所述方法还包括以下至少之一：

对所述视频流进行降噪；

对所述音频流进行降噪。

8.根据权利要求1至6中任一项所述的目标行为的检测方法，其特征在于，在确定检测到所述目标行为之后，所述方法还包括：

针对所述目标行为发送报警信息。

9.一种目标行为的检测装置，其特征在于，包括：

数据获取模块，设置为通过摄像设备获取视频流，并通过音频采集设备获取音频流；

目标行为判断模块，设置为基于所述视频流检测是否存在目标行为，并基于所述音频流检测是否存在所述目标行为；

行为综合确认模块，设置为在基于所述视频流和所述音频流都检测到存在所述目标行为的情况下，确定检测到所述目标行为；

其中，行为综合确认模块，设置为在基于所述视频流和所述音频流都检测到存在所述目标行为、且所述视频流中目标对象的关键点的运动变化特征与所述音频流中的声音的声音变化特征相匹配的情况下，确定检测到所述目标行为；

其中，所述视频流中目标对象的关键点的运动变化特征与所述音频流中的声音的声音变化特征相匹配包括：所述关键点的往复运动的频率与所述声音的节律性重复的频率一致。