[发明专利]动作识别、姿势估计的方法及装置有效
申请号: | 201710955087.1 | 申请日: | 2017-10-13 |
公开(公告)号: | CN109670380B | 公开(公告)日: | 2022-12-27 |
发明(设计)人: | 乔宇;杜文斌;王亚立;江立辉;刘健庄 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | G06V40/20 | 分类号: | G06V40/20;G06V20/40;G06V20/59;G06T7/246 |
代理公司: | 北京龙双利达知识产权代理有限公司 11329 | 代理人: | 张振;张欣 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 动作 识别 姿势 估计 方法 装置 | ||
1.一种动作识别方法,其特征在于,包括:
确定待处理视频,所述待处理视频为包含人体图像的视频;
根据所述待处理视频确定待处理图像,所述待处理图像为下列图像中的至少一种:第一图像,根据所述待处理视频中的多帧图像生成的光流图像,其中,所述第一图像为所述待处理视频中的任意一帧图像,或者,所述第一图像为所述待处理视频中的多帧图像合成的图像;
对所述待处理图像进行卷积处理,得到多个特征向量,其中,所述多个特征向量分别用于表示所述待处理图像不同位置的特征;
根据所述多个特征向量确定人体的人体关节的权重系数集合,其中,所述人体关节的权重系数集合包括所述多个特征向量中的每个特征向量在所述人体关节的权重系数,第一类特征向量的权重系数大于或者等于第二类特征向量的权重系数,所述第一类特征向量对应在所述待处理图像中的位置和所述人体关节对应在所述待处理图像中的位置之间的距离为第一距离,所述第二类特征向量对应在所述待处理图像中的位置和所述人体关节对应在所述待处理图像中的位置之间的距离为第二距离,所述第一距离小于或者等于所述第二距离,所述人体关节的数量为多个,每个人体关节均对应一个权重系数集合;
根据所述人体关节的权重系数集合对所述多个特征向量进行加权处理,得到所述人体关节的动作特征;
根据所述人体关节的动作特征确定所述人体的动作特征;
根据所述人体的动作特征,确定所述人体的动作类型。
2.如权利要求1所述的方法,其特征在于,所述根据所述多个特征向量确定所述人体的人体关节的权重系数集合,包括:
根据所述多个特征向量以及所述人体的累计动作信息,确定所述人体关节的权重系数集合,其中,所述人体的累计动作信息用于指示当前时刻之前累计的所述人体的动作特征。
3.如权利要求1或2所述的方法,其特征在于,所述根据所述人体关节的动作特征确定所述人体的动作特征,包括:
对所述人体关节的动作特征进行加权或者组合,得到所述人体的动作特征。
4.如权利要求1或2所述的方法,其特征在于,所述根据所述人体关节的动作特征确定所述人体的动作特征,包括:
对所述人体关节的动作特征进行加权或者组合,得到人体部分的动作特征,其中,所述人体包含多个所述人体部分,每个人体部分包含至少一个人体关节;
对所述人体部分的动作特征进行加权或者组合,得到所述人体的动作特征。
5.如权利要求1或2所述的方法,其特征在于,所述待处理图像包括所述第一图像和所述光流图像,所述对所述待处理图像进行卷积处理,得到多个特征向量,包括:
对所述第一图像进行卷积处理,得到所述第一图像的多个特征向量;
对所述光流图像进行卷积处理,得到所述光流图像的多个特征向量;
所述根据所述多个特征向量确定所述人体的人体关节的权重系数集合,包括:
根据所述第一图像的多个特征向量分别确定所述人体关节的第一类权重系数集合;
根据所述光流图像的多个特征向量确定所述人体关节的第二类权重系数集合;
所述根据所述人体关节的权重系数集合对所述多个特征向量进行加权处理,得到所述人体关节的动作特征,包括:
根据所述第一类权重系数集合对所述第一图像的多个特征向量进行加权处理,得到所述人体关节的第一类动作特征;
根据所述第二类权重系数集合对所述光流图像的多个特征向量进行加权处理,得到所述人体关节的第二类动作特征;
所述根据所述人体关节的动作特征确定所述人体的动作特征,包括:
对所述人体关节的第一类动作特征和所述人体关节的第二类动作特征进行加权或组合,得到所述人体的动作特征。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710955087.1/1.html,转载请声明来源钻瓜专利网。