[发明专利]训练方法、装置、动作识别方法、装置及电子设备有效
申请号: | 202110227119.2 | 申请日: | 2021-03-01 |
公开(公告)号: | CN112926462B | 公开(公告)日: | 2023-02-07 |
发明(设计)人: | 张发恩;秦树鑫 | 申请(专利权)人: | 创新奇智(西安)科技有限公司 |
主分类号: | G06V40/10 | 分类号: | G06V40/10;G06V10/764;G06V10/44;G06V10/82;G06V10/766;G06N3/08 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 张萌 |
地址: | 710000 陕西省西安市高新区鱼化街办*** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 训练 方法 装置 动作 识别 电子设备 | ||
1.一种训练方法,其特征在于,用于训练轮廓特征提取网络,所述方法包括:
获取包括多个训练样本的训练集,所述训练样本的训练标签包括:对象的中心点、所述对象的轮廓线、以所述中心点为起点且向所述轮廓线发散出N条射线后与所述轮廓线相交形成的N个轮廓关键点,相邻两条射线之间的角度差为A,且N=360/A;
将所述训练样本输入到基础网络模型进行训练,直至所述基础网络模型收敛,得到所述轮廓特征提取网络;
其中,所述轮廓特征提取网络的输出为与其输入特征图中的对象对应的轮廓特征图,所述轮廓特征图包括:与所述输入特征图中的对象的N个轮廓关键点一一对应的N个关键点通道、与所述输入特征图中的对象的中心点对应的中心点通道,以及与所述N个关键点通道一一对应的,用于表征该关键点通道所指向的轮廓关键点与所述输入特征图中的对象的中心点之间的距离回归通道。
2.根据权利要求1所述的方法,其特征在于,当在所述输入特征图中包括多个对象时,所述轮廓特征提取网络的输出为与每个对象对应的轮廓特征图。
3.一种动作识别方法,其特征在于,所述方法包括:
对获取到的待识别图像进行特征提取,得到对应的特征图;
将所述特征图输入到通过权利要求1或2所述的方法训练得到的轮廓特征提取网络,输出得到轮廓特征图;
对所述轮廓特征图进行解码,得到轮廓特征向量;
将所述轮廓特征向量输入到预先训练好的分类模型进行分类,得到用于表征动作类别的分类结果。
4.根据权利要求3所述的方法,其特征在于,所述轮廓特征图包括多个通道,每个通道对应一个热力图,所述对所述轮廓特征图进行解码,得到轮廓特征向量,包括:
从所述多个通道中,确定出用于表征所述特征图中的对象的中心点的中心点通道、用于表征所述特征图中的对象的轮廓关键点的关键点通道,以及与每个所述关键点通道一一对应的距离回归通道;
根据与所述中心点通道对应的热力图以及与每个所述关键点通道对应的热力图,确定出所述中心点的坐标以及每个所述关键点通道所指向的轮廓关键点的坐标;
针对每个所述关键点通道,根据该关键点通道所指向的轮廓关键点的坐标以及所述中心点的坐标,从与该关键点通道对应的距离回归通道所对应的热力图中,确定出该关键点通道所指向的轮廓关键点与所述中心点之间的距离;
根据各个轮廓关键点与所述中心点之间的距离,形成所述轮廓特征向量。
5.根据权利要求4所述的方法,其特征在于,所述根据与所述中心点通道对应的热力图以及与每个所述关键点通道对应的热力图,确定出所述中心点的坐标以及每个所述关键点通道所指向的轮廓关键点的坐标,包括:
将与所述中心点通道对应的热力图中,极大值对应的位置的坐标确定为所述中心点的坐标;
将与所述该关键点通道对应的热力图中,极大值对应的位置的坐标确定为所述该关键点通道所指向的轮廓关键点的坐标。
6.根据权利要求4所述的方法,其特征在于,所述根据该关键点通道所指向的轮廓关键点的坐标以及所述中心点的坐标,从与该关键点通道对应的距离回归通道所对应的热力图中,确定出该关键点通道所指向的轮廓关键点与所述中心点之间的距离,包括:
获取与该关键点通道对应的距离回归通道对应的热力图中,与该关键点通道所指向的轮廓关键点的坐标处的第一取值以及所述中心点的坐标处的第二取值;
在确定所述第一取值大于所述第二取值时,确定所述第一取值为所述该关键点通道所指向的轮廓关键点与所述中心点之间的距离。
7.根据权利要求4所述的方法,其特征在于,预先为每个关键点通道设置对应的角度信息,所述根据各个轮廓关键点与所述中心点之间的距离,形成所述轮廓特征向量,包括:
根据各个关键点通道所对应的角度信息大小关系,对各个轮廓关键点与所述中心点之间的距离进行排序,形成所述轮廓特征向量。
8.根据权利要求3-7任一项所述的方法,其特征在于,所述待识别图像为单帧图像,或者所述待识别图像为包括多帧图像的图像序列。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于创新奇智(西安)科技有限公司,未经创新奇智(西安)科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110227119.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种菠萝包制作方法
- 下一篇:一种模块化的土体深部位移实时测量装置