[发明专利]动作匹配方法及相关产品在审
申请号: | 201910965541.0 | 申请日: | 2019-10-11 |
公开(公告)号: | CN110838353A | 公开(公告)日: | 2020-02-25 |
发明(设计)人: | 苏晓芸 | 申请(专利权)人: | 科大讯飞(苏州)科技有限公司 |
主分类号: | G16H20/30 | 分类号: | G16H20/30;G06K9/00;G06K9/62 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 郝传鑫;熊永强 |
地址: | 215000 江苏省苏州*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 动作 匹配 方法 相关 产品 | ||
本申请实施例公开了一种动作匹配方法及相关产品,其中方法包括:获取标准动作信息和待评估动作视频帧序列,所述标准动作信息中包括至少两个按时序排列的主要动作信息,所述动作信息用于表征身体部位的姿态;基于所述标准动作信息和所述待评估动作视频帧序列执行区间定位操作,得到所述匹配区间,所述匹配区间是指所述待评估动作视频帧序列中的时序区间;基于所述主要动作信息以及所述匹配区间,确定与所述主要动作信息对应的第一匹配帧,所述第一匹配帧为所述待评估动作视频帧序列中的需要被评估的视频帧。通过本申请实施例,在动作匹配时,可以有效避免节奏不一致导致不能匹配的问题。
技术领域
本申请涉及术领域,尤其涉及一种动作匹配方法及相关产品。
背景技术
运动过程中缺乏规范性的指导和练习,易导致膝关节运动轨迹异常,造成膝关节疼痛与损伤。动作智能指导可以让练习者实时掌握动作的标准程度达到良好的练习效果,并避免运动损伤。动作标准度评估是动作智能指导的关键模块,基于专业运动员数据建立标准模型,将练习者姿态数据与之比对得到练习者的动作标准度,并结合语音动画等交互方式达到智能指导的目的。
动作标准度评估最常用的方法为基于时间对齐的帧对帧匹配,将练习者初始动作与标准模型初始动作进行时间对齐,以标准模型中的采样间隔进行练习者数据采样,对时间对齐后的练习者姿态数据与对应的标准模型中的姿态数据计算距离或者相关系数作为练习者当前姿态的评估结果,将时序所有帧评估值的均值作为当前序列的评估结果。
另一种动作标准度评估采用有限状态机(Finite-state machine,FSM)算法,对标准动作序列进行关键帧有序划分,将练习者姿态数据逐个与FSM中当前关键帧进行距离或者相关系数计算,匹配成功时FSM流转到下一个关键帧,之后练习者的姿态将与流转后的关键帧进行比对,匹配成功表示练习者当前姿态与匹配的标准动作关键帧对齐,匹配结果作为练习者当前动作的评估结果。
基于时间对齐的帧帧匹配方法计算简单,但是这种方法需要起始动作严格对齐,而且当练习者与标准模型节奏不一致时存在非常大的误差,而不同级别的练习者本身就存在节奏差异,这导致很多练习者无法进行姿态标准度智能评估。
对于有限状态机(FSM)方法,由于其后面状态依赖于之前的状态,对应于太极拳评估中其后面的关键帧匹配依赖于之前的匹配结果,当练习者中间某个动作不标准时,将导致后续所有动作都无法继续评估。
发明内容
本申请实施例提供一种动作匹配方法,可以更好的应对不同节奏变化动作匹配,提升动作匹配的质量。
第一方面,本申请实施例提供了一种动作匹配方法,该方法包括:
获取标准动作信息和待评估动作视频帧序列,所述标准动作信息中包括至少两个按时序排列的主要动作信息,所述动作信息用于表征身体各部位的姿态;
基于所述标准动作信息和所述待评估动作视频帧序列执行区间定位操作,得到所述匹配区间,所述匹配区间是指所述待评估动作视频帧序列中的时序区间;
基于所述主要动作信息以及所述匹配区间,确定与所述主要动作信息对应的第一匹配帧,所述第一匹配帧为所述待评估动作视频帧序列中的视频帧。
第二方面,本申请实施例提供一种动作匹配装置,包括处理单元和通信单元,其中,
所述处理单元,用于通过所述通信单元获取标准动作信息和待评估动作视频帧序列,所述标准动作信息中包括至少两个按时序排列的主要动作信息,所述动作信息用于表征身体各部位的姿态;以及基于所述标准动作信息和所述待评估动作视频帧序列执行区间定位操作,得到所述匹配区间,所述匹配区间是指所述待评估动作视频帧序列中的时序区间;以及基于所述主要动作信息以及所述匹配区间,确定与所述主要动作信息对应的第一匹配帧,所述第一匹配帧为所述待评估动作视频帧序列中的视频帧。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于科大讯飞(苏州)科技有限公司,未经科大讯飞(苏州)科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910965541.0/2.html,转载请声明来源钻瓜专利网。