[发明专利]基于多模态的行为识别方法

权利要求书

1.一种基于多模态的行为识别方法，其特征在于，包括如下步骤：

A)采用视频采集模块采集目标区域各个位置处的视频监控图像；

B)将所述视频监控图像通过网络发送给网络交换机；

C)所述网络交换机将所述视频监控图像发送给行为分析模块，同时将所述视频监控图像转成设定格式后发送给分布式文件系统进行存储；

D)所述行为分析模块将所述视频监控图像中的干扰信号进行过滤处理，得到已处理视频图像；

E)对所述已处理视频图像进行人脸特征分析；

F)根据预设行为分析算法自动分析所述已处理视频图像中的场景是否存在异常行为，如是，执行步骤G)；否则，执行步骤H)；

G)将报警信息发送给移动终端中的视频监控APP进行显示；

H)将监控正常的信息发送给视频监控APP进行显示。

2.根据权利要求1所述的基于多模态的行为识别方法，其特征在于，所述预设行为分析算法中包含暴力扭打行为特征和激烈运动行为特征。

3.根据权利要求1所述的基于多模态的行为识别方法，其特征在于，所述干扰信号包括场景光影、信号扰动和遮挡物。

4.根据权利要求1所述的基于多模态的行为识别方法，其特征在于，所述人脸特征分析基于深度学习算法，能检测所述已处理视频图像中的人脸并进行人脸相关的特征分析。

5.根据权利要求1至4任意一项所述的基于多模态的行为识别方法，其特征在于，所述人脸特征分析能进行年龄识别、颜值识别、性别识别和表情识别。

6.根据权利要求5所述的基于多模态的行为识别方法，其特征在于，所述年龄识别为判断出所述已处理视频图像中的任务的年龄段。

7.根据权利要求5所述的基于多模态的行为识别方法，其特征在于，所述颜值识别为对所述已处理视频图像中的人物颜值进行分析给出对应的颜值识别结果，所述颜值识别结果至少包括漂亮、好看、普通和难看。

8.根据权利要求5所述的基于多模态的行为识别方法，其特征在于，所述性别识别为识别所述已处理视频图像中的人物的性别。

9.根据权利要求5所述的基于多模态的行为识别方法，其特征在于，所述表情识别为识别出所述已处理视频图像中的人物的表情特征，所述表情特征至少包括喜悦、愤怒、悲伤、惊恐和厌恶。