[发明专利]关键点位置确定方法、装置及电子设备有效
申请号: | 201811295915.4 | 申请日: | 2018-11-01 |
公开(公告)号: | CN109410276B | 公开(公告)日: | 2020-10-27 |
发明(设计)人: | 张雄;李强;郑文 | 申请(专利权)人: | 北京达佳互联信息技术有限公司 |
主分类号: | G06T7/70 | 分类号: | G06T7/70;G06T17/00;G06N3/02 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 丁芸;项京 |
地址: | 100084 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 关键 位置 确定 方法 装置 电子设备 | ||
1.一种关键点位置确定方法,其特征在于,包括:
基于包含人手的影像的待分析图像,确定所述人手的形状和所述人手中多个骨骼节点的位姿,其中,所述待分析图像中的人手的影像部分被遮挡;
基于所述形状和所述位姿,按照预设的人手骨骼的几何约束条件,确定所述人手的关键点的位置;
所述基于包含人手的影像的待分析图像,确定所述人手的形状和所述人手中多个骨骼节点的位姿,包括:
将包含人手的影像的待分析图像,输入预设的参数提取网络,得到所述人手的形状和所述人手中多个骨骼节点的位姿,所述参数提取网络预先经过标注有人手的形状和各个骨骼节点的位姿的样本图像的训练。
2.根据权利要求1所述的方法,其特征在于,所述基于所述形状和所述位姿,按照预设的人手骨骼的几何约束关系,确定所述人手的关键点的位置,包括:
基于所述形状和所述位姿,按照预设的人手骨骼的几何约束关系,构建所述人手的三维骨骼模型;
从所述三维骨骼模型中读取所述人手的关键点的三维空间坐标,作为所述关键点的位置。
3.根据权利要求2所述的方法,其特征在于,所述基于所述形状和所述位姿,按照预设的人手骨骼的几何约束关系,构建所述人手的三维骨骼模型,包括:
将所述形状和所述位姿作为模型参数输入至预设的骨骼动画框架中,得到所述人手的三维骨骼模型,所述骨骼动画框架为从多个样本人手三维骨骼模型中提取几何约束条件得到的参数化的框架。
4.根据权利要求1所述的方法,其特征在于,所述参数提取网络为移动端神经网络MobileNet。
5.一种关键点位置确定装置,其特征在于,包括:
人手分析单元,被配置为执行基于包含人手的影像的待分析图像,确定所述人手的形状和所述人手中多个骨骼节点的位姿,其中,所述待分析图像中的人手的影像部分被遮挡;
位置确定单元,被配置为执行基于所述形状和所述位姿,按照预设的人手骨骼的几何约束条件,确定所述人手的关键点的位置;
所述位置确定单元,具体被配置为执行将包含人手的影像的待分析图像,输入预设的参数提取网络,得到所述人手的形状和所述人手中多个骨骼节点的位姿,所述参数提取网络预先经过标注有人手的形状和各个骨骼节点的位姿的样本图像的训练。
6.根据权利要求5所述的装置,其特征在于,所述人手分析单元,具体被配置为执行基于所述形状和所述位姿,按照预设的人手骨骼的几何约束关系,构建所述人手的三维骨骼模型;
从所述三维骨骼模型中读取所述人手的关键点的三维空间坐标,作为所述关键点的位置。
7.根据权利要求6所述的装置,其特征在于,所述人手分析单元,具体被配置为执行将所述形状和所述位姿作为模型参数输入至预设的骨骼动画框架中,得到所述人手的三维骨骼模型,所述骨骼动画框架为从多个样本人手三维骨骼模型中提取几何约束条件得到的参数化的框架。
8.根据权利要求5所述的装置,其特征在于,所述参数提取网络为移动端神经网络MobileNet。
9.一种电子设备,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
基于包含人手的影像的待分析图像,确定所述人手的形状和所述人手中多个骨骼节点的位姿,其中,所述待分析图像中的人手的影像部分被遮挡;
基于所述形状和所述位姿,按照预设的人手骨骼的几何约束条件,确定所述人手的关键点的位置;
所述处理器具体被配置为:
将包含人手的影像的待分析图像,输入预设的参数提取网络,得到所述人手的形状和所述人手中多个骨骼节点的位姿,所述参数提取网络预先经过标注有人手的形状和各个骨骼节点的位姿的样本图像的训练。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京达佳互联信息技术有限公司,未经北京达佳互联信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811295915.4/1.html,转载请声明来源钻瓜专利网。