[发明专利]动作识别方法及装置

说明书

本说明书提供动作识别方法及装置，其中所述动作识别方法包括：获取图像采集设备采集的图像帧；对所述图像帧中的目标对象的动作区域进行分割处理，获得中间图像；将所述中间图像输入动作识别模型进行关键点识别和坐标映射，获得识别出的动作关键点对应的动作组架节点，以及所述动作关键点映射的三维坐标信息；根据所述三维坐标信息、所述动作组架节点及其所属的虚拟动作组架生成三维虚拟对象；基于动作识别数据集对所述三维虚拟对象进行动作识别，确定所述目标对象的动作类型。

技术领域

本说明书涉及手势识别技术领域，特别涉及一种动作识别方法。本说明书同时涉及一种动作识别装置，一种计算设备，以及一种计算机可读存储介质。

背景技术

随着互联网技术的发展，基于手势识别的AR交互在移动终端得到了广泛的应用，用户可以通过不触碰移动终端的方式，实现通过手势对移动终端上相关的应用进行操作。然而，手势识别通常是采用预先采集较多的手势图像作为训练样本，离线训练一个手势检测器，之后将该检测器部署到线上即可实现手势的识别，或者通过二维手部关键点识别的方式构建二维手势图像，再基于二维手势图像实现手势的识别；无论是通过检测器实现手势识别，还是通过构建二维图像实现手势识别，都存在着成本高、通用性和灵活性低的问题，并且由于人手的自由度比较高，同一种手势在不同视角下的手势类型可能存在差异，从而进一步的影响了手势识别的准确度。

发明内容

有鉴于此，本说明书实施例提供了一种动作识别方法。本说明书同时涉及一种动作识别装置，一种计算设备，以及一种计算机可读存储介质，以解决现有技术中存在的技术缺陷。

根据本说明书实施例的第一方面，提供了一种动作识别方法，包括：

获取图像采集设备采集的图像帧；

对所述图像帧中的目标对象的动作区域进行分割处理，获得中间图像；

将所述中间图像输入动作识别模型进行关键点识别和坐标映射，获得识别出的动作关键点对应的动作组架节点，以及所述动作关键点映射的三维坐标信息；

根据所述三维坐标信息、所述动作组架节点及其所属的虚拟动作组架生成三维虚拟对象；

基于动作识别数据集对所述三维虚拟对象进行动作识别，确定所述目标对象的动作类型。

可选的，所述动作识别模型进行关键点识别，包括：

在所述中间图像中识别出所述目标对象对应的所述动作关键点，并确定所述动作关键点的关键点标签；

基于关键点标签与动作组架节点的节点标签的对应关系，确定所述关键点标签对应的目标节点标签；

根据所述目标节点标签确定所述关键点标签所属的动作关键点对应的所述动作组架节点。

可选的，所述动作识别模型进行坐标映射，包括：

确定所述动作关键点在所述中间图像中的位置信息；

基于所述位置信息映射出所述动作关键点对应的所述三维坐标信息。

可选的，所述根据所述三维坐标信息、所述动作组架节点及其所属的虚拟动作组架生成三维虚拟对象，包括：

根据所述动作关键点确定所述动作组架节点与所述三维坐标信息的对应关系，以及基于所述虚拟动作组架确定所述动作组架节点的连接关系；

将所述三维坐标信息按照所述连接关系进行连接处理，生成所述三维虚拟对象。

可选的，所述根据所述三维坐标信息、所述动作组架节点及其所属的虚拟动作组架生成三维虚拟对象步骤执行之后，且所述基于动作识别数据集对所述三维虚拟对象进行动作识别，确定所述目标对象的动作类型步骤执行之前，还包括：

检测生成的所述三维虚拟对象的对象数目；