[发明专利]人体动作规范性评估方法、设备和计算机可读存储介质在审
申请号: | 202211269208.4 | 申请日: | 2022-10-17 |
公开(公告)号: | CN115565250A | 公开(公告)日: | 2023-01-03 |
发明(设计)人: | 赵杰;丁一臣;向洁 | 申请(专利权)人: | 深圳力维智联技术有限公司;南京中兴力维软件有限公司 |
主分类号: | G06V40/20 | 分类号: | G06V40/20;G06V20/40;G06V10/75;G06V10/74;G06V10/82 |
代理公司: | 深圳鼎合诚知识产权代理有限公司 44281 | 代理人: | 郭燕;彭家恩 |
地址: | 518000 广东省深圳市南山区粤海街道高新*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 人体 动作 规范性 评估 方法 设备 计算机 可读 存储 介质 | ||
1.一种人体动作规范性评估方法,其特征在于,包括:
获取模板图像和用户动作图像;
基于人体姿态估计器对所述模板图像进行处理得到模板高维关键点热力图,基于人体姿态估计器对所述用户动作图像进行处理得到多张用户高维关键点热力图;
计算所述模板高维关键点热力图和所述用户高维关键点热力图的整体相似度;
若所述整体相似度高于第一阈值,则基于模板高维关键点热力图和用户高维关键点热力图计算用户多个肢体中每个肢体的相似度;
基于所述用户多个肢体中每个肢体的相似度对用户进行指导评估。
2.如权利要求1所述的人体动作规范性评估方法,其特征在于,所述获取模板图像和用户动作图像,包括:
获取模板视频和用户动作视频;
对模板视频和用户动作视频分别进行拆帧分解得到一个或多个模板图像和一个或多个用户动作图像。
3.如权利要求1所述的人体动作规范性评估方法,还包括,若所述整体相似度不高于所述第一阈值,则播放提示语,提示用户当前动作不规范。
4.如权利要求1所述的人体动作规范性评估方法,其特征在于,所述计算所述模板高维关键点热力图和所述用户高维关键点热力图的整体相似度,包括:
使用Argmax算法分别对所述模板高维关键点热力图和所述用户高维关键点热力图进行位置解码得到模板位置坐标和用户位置坐标;
基于余弦函数对模板位置坐标和用户位置坐标计算整体相似度。
5.如权利要求4所述的人体动作规范性评估方法,其特征在于,所述基于余弦函数对模板位置坐标和用户位置坐标计算整体相似度,包括:通过模板位置坐标构建目标坐标向量X,通过用户位置坐标构建用户坐标向量Y,整体相似度为1-cos(θ),其中
6.如权利要求1所述的人体动作规范性评估方法,其特征在于,在所述计算所述模板高维关键点热力图和所述用户高维关键点热力图的整体相似度之前,还包括:对所述模板高维关键点热力图和所述用户高维关键点热力图进行空间尺度标准化操作以去除设备和空间位置偏差对整体相似度的影响。
7.如权利要求6所述的人体动作规范性评估方法,其特征在于,所述空间尺度标准化操作包括:生成包裹用户的矩形检测框,将矩形检测框从用户高维关键点热力图上裁剪下来,并调整图片尺寸,生成256×192尺度的用户图像,其中256×192尺度的用户图像的尺寸坐标J=((jx-dtl)/scale,(jy-dtl)/scale),其中jx,jy是用户高维关键点热力图尺寸坐标,dtl是矩形检测框左上角坐标,scale是将裁剪图调整到256*192大小的尺度因子。
8.如权利要求1所述的人体动作规范性评估方法,其特征在于,所述基于所述用户多个肢体中每个肢体的相似度对用户进行指导评估,包括:显示相似度最低的肢体,并语音播放提示语。
9.一种电子设备,其特征在于,包括:存储器;处理器;以及计算机程序;其中,所述计算机程序存储在所述存储器中,并配置为由所述处理器执行以实现如权利要求1~8任一种所述的方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1~8任一项所述方法对应的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳力维智联技术有限公司;南京中兴力维软件有限公司,未经深圳力维智联技术有限公司;南京中兴力维软件有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211269208.4/1.html,转载请声明来源钻瓜专利网。