[发明专利]基于自适应感受野网络和关节点损失权重的姿态估计方法有效
申请号: | 202011188660.9 | 申请日: | 2020-10-30 |
公开(公告)号: | CN112241726B | 公开(公告)日: | 2023-06-02 |
发明(设计)人: | 骆炎民;欧志龙;林躬耕 | 申请(专利权)人: | 华侨大学;福建省公田软件股份有限公司 |
主分类号: | G06V40/20 | 分类号: | G06V40/20;G06V10/764;G06V10/82;G06N3/0464;G06N3/08;G06T5/30;G06T7/62 |
代理公司: | 泉州市文华专利代理有限公司 35205 | 代理人: | 陈雪莹 |
地址: | 362000 福建*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 自适应 感受 网络 关节点 损失 权重 姿态 估计 方法 | ||
1.基于自适应感受野网络和关节点损失权重的姿态估计方法,其特征在于:包括如下步骤:
步骤S10、基于自适应感受野单元搭建自适应感受野网络;
步骤S20、利用样本图像对所述自适应感受野网络进行训练;
步骤S30、在训练所述自适应感受野网络时,计算得到所述样本图像包含的关节点以及各关节点的损失值;
步骤S40、基于各关节点的所述损失值计算各关节点的损失权重;
步骤S50、基于所述损失权重以及损失值计算得到最终损失值,基于所述最终损失值优化自适应感受野网络;
步骤S60、将待测图像输入训练好的所述自适应感受野网络,计算关节点的位置并形成完整的人体姿态;
所述步骤S30具体包括:
步骤S31、获取数据集中的样本图像,将所述样本图像调整为大小为256×256的RGB图像后,输入搭建好的所述自适应感受野网络;
步骤S32、通过所述自适应感受野网络获取RGB图像中关节点的位置热图;
步骤S33、利用非极大值抑制算法查找所述位置热图中,各关节点的最大像素值位置;
步骤S34、以所述最大像素值位置为关节点位置的中心点,膨胀所述中心点生成半径为R个像素的圆,得到预测的关节点位置;
步骤S35、利用均方误差损失函数以及关节点位置计算得到各关节点的损失值:
其中M表示计算损失值;i表示人体的编号,j表示关节点的编号,且i和j均为正整数;Pi(pj)表示第i个人,第j个关节点的预测值;为预测的关节点的热图,尺度为λ×64×64,λ表示关节点的个数;Gi(pj)表示第i个人,第j个关节点的真值;G={g1,K,gλ},为高斯激活生成的各人体部位对应的真值热图;
所述步骤S40中,所述损失权重的计算公式为:
其中Wi,j表示第i个人,第j个关节点的损失权重;Pi(pj)表示第i个人,第j个关节点的预测值;为预测关节点的热图,尺度为λ×64×64,λ表示关节点的个数;Gi(pj)表示第i个人,第j个关节点的真值;G={g1,K,gλ},为高斯激活生成的各人体部位对应的真值热图;
所述步骤S50中,所述最终损失值的计算公式为:
2.如权利要求1所述的基于自适应感受野网络和关节点损失权重的姿态估计方法,其特征在于:所述步骤S10具体包括:
步骤S11、创建一大小为7×7的卷积核,用于提取图像特征并改变图像的通道数;
步骤S12、在所述卷积核的输出端,依次设置若干个自适应感受野单元;
步骤S13、在最后一个所述自适应感受野单元的输出端,依次设置若干个转置卷积核组成转置卷积层,最后一个所述转置卷积核输出的特征图分辨率与第一个所述自适应感受野单元输出的特征图分辨率一致,完成自适应感受野网络的搭建。
3.如权利要求1所述的基于自适应感受野网络和关节点损失权重的姿态估计方法,其特征在于:所述步骤S60具体包括:
步骤S61、获取待测图像,将所述待测图像调整为大小为256×256的RGB图像后,输入训练好的所述自适应感受野网络中;
步骤S62、通过所述自适应感受野网络获取RGB图像中关节点的位置热图;
步骤S63、利用非极大值抑制算法查找所述位置热图中,各关节点的最大像素值位置;
步骤S64、以所述最大像素值位置为关节点位置的中心点,膨胀所述中心点生成半径为R个像素的圆,得到预测的关节点位置;
步骤S65、基于预先标定各关节点的序号以及预测的关节点位置,依次连接各关节点形成完整的人体姿态。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华侨大学;福建省公田软件股份有限公司,未经华侨大学;福建省公田软件股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011188660.9/1.html,转载请声明来源钻瓜专利网。