[发明专利]一种基于深度卷积神经网络的日常人体行为识别方法在审
申请号: | 201810886376.5 | 申请日: | 2018-08-06 |
公开(公告)号: | CN109255296A | 公开(公告)日: | 2019-01-22 |
发明(设计)人: | 周志刚;杨锦;曾岳南;程韬波 | 申请(专利权)人: | 广东工业大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 广州粤高专利商标代理有限公司 44102 | 代理人: | 林丽明 |
地址: | 510006 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 卷积神经网络 人体图像 人体行为 人体行为识别 分类 预处理 分类结果 特征提取 分类器 输出 配合 | ||
1.一种基于深度卷积神经网络的日常人体行为识别方法,其特征在于,包括以下步骤:
S1. 建立深度卷积神经网络模型;
S2. 获取并对人体图像进行预处理;
S3. 通过深度卷积神经网络模型,提取人体图像特征;
S4. 通过人体图像特征,输出人体行为序列;
S5. 将人体行为序列进行分类,得到分类结果。
2.根据权利要求1所述的基于深度卷积神经网络的日常人体行为识别方法,其特征在于,所述步骤S1具体包括以下步骤:
S11. 在深度学习框架中分别建立用于特征提取的深度卷积神经网络模型和用于提取人体行为序列的深度卷积神经网络模型;
其中,用于特征提取的深度卷积神经网络模型包括2个分支网络模型,每个分支网络模型由多阶段的网络组成。
3.根据权利要求1所述的基于深度卷积神经网络的日常人体行为识别方法,其特征在于,所述步骤S3具体包括以下步骤:
S31. 收集人体行为数据库,对人体行为数据库中的人体日常行为数据进行分类,转换为标准的统一尺寸;
S32. 使用所述步骤S11中的用于特征提取的深度卷积神经网络模型,从经过所述步骤S2预处理的人体图像中提取人体图像的特征,输出人体图像的特征图。
4.根据权利要求1所述的基于深度卷积神经网络的日常人体行为识别方法,其特征在于,所述步骤S4具体包括以下步骤:
S41. 使用所述步骤S31中的人体行为数据库,调整所述步骤S11中的用于特征提取的深度卷积神经网络模型,直至收敛;
S42. 将所述步骤S32得到的人体图像的特征图发送至经过所述步骤S41处理的用于特征提取的深度卷积神经网络模型,用于特征提取的深度卷积神经网络模型的分别提取出关节点数据和关节点间关联数据,从而输出人体的行为姿态序列;
其中,关节点数据提取的具体过程如下:
第一阶段对关节点数据预测的结果输入第二阶段,第二阶段结合第一阶段的预测结果以及人体图像的特征图优化并输出关节点数据的预测结果给第三阶段,第三阶段结合第二阶段的预测结果以及人体图像的特征图优化并输出关节点数据的预测结果给第四阶段,重复上述操作,直至得到所有的关节点预测结果;
关节点间关联数据提取的具体过程如下:
第一阶段对关节点间关联数据预测的结果输入第二阶段,第二阶段结合第一阶段的预测结果以及人体图像的特征图优化并输出关节点间关联数据的预测结果给第三阶段,第三阶段结合第二阶段的预测结果以及人体图像的特征图优化并输出关节点间关联数据的预测结果给第四阶段,重复上述操作,直至得到所有的关节点间关联预测结果。
5.根据权利要求1所述的基于深度卷积神经网络的日常人体行为识别方法,其特征在于,所述步骤S5具体包括以下过程:
将所述步骤S42得到的人体行为序列分为静态序列和动态序列;
其中,采用SVM或Softmax分类器对所述静态序列进行分类,输出人体行为的分类结果;
建立递归神经网络模型对所述动态序列进一步检测分类,从而输出人体行为的分类结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东工业大学,未经广东工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810886376.5/1.html,转载请声明来源钻瓜专利网。