[发明专利]一种图像处理方法及装置

权利要求书

1.一种图像处理方法，应用于电子设备，其特征在于，所述方法包括：

获取目标二维图像内的手部关键点对应的特征图，其中，每个所述手部关键点对应一个特征图；

将所述特征图输入至预先经过训练的多层级修正网络，生成修正后的特征图，其中，所述多层级修正网络用于修正相邻手指对应的手部关键点之间的位置偏移；

对每个所述修正后的特征图分别作归一化处理，生成多个目标特征图；

对于每一个目标特征图，将所述目标特征图分别与第一坐标矩阵和第二坐标矩阵作内积运算，生成所述目标特征图对应的目标手部关键点的坐标，其中，所述第一坐标矩阵、所述第二坐标矩阵均为由坐标构成的矩阵，所述第一坐标矩阵和所述第二坐标矩阵的维度与所述目标特征图对应的矩阵维度相同；

所述对于每一个目标特征图，将所述目标特征图分别与第一坐标矩阵和第二坐标矩阵作内积运算，生成所述目标特征图对应的目标手部关键点的坐标，包括：

对于每一个目标特征图，将所述目标特征图中每个特征点分别与第一坐标矩阵中相同位置的横坐标进行相乘，并将相乘结果相加，生成所述目标特征图对应的目标手部关键点的目标横坐标；

对于每一个目标特征图，将所述目标特征图中每个特征点分别与第二坐标矩阵中相同位置的纵坐标进行相乘，并将相乘结果相加，生成所述目标特征图对应的目标手部关键点的目标纵坐标；

将所述目标横坐标和所述目标纵坐标分别设置为所述目标手部关键点的横坐标以及纵坐标，生成所述目标手部关键点的坐标。

2.根据权利要求1所述的方法，其特征在于，所述对于每一个目标特征图，将所述目标特征图分别与第一坐标矩阵和第二坐标矩阵作内积运算，生成所述目标特征图对应的目标手部关键点的坐标之前，所述方法还包括：

以所述目标特征图对应的矩阵中心为坐标系原点，建立平面直角坐标系；

对所述平面直角坐标系设置横坐标最大值、横坐标最小值、纵坐标最大值、纵坐标最小值；

获取所述目标特征图对应的矩阵维度m*n，其中，m≥2，n≥2，m、n均为整数；

将所述平面直角坐标系的横轴，在所述横坐标最大值和所述横坐标最小值的范围内进行n-1等分，生成n个横坐标；

将所述平面直角坐标系的纵轴，在所述纵坐标最大值和所述纵坐标最小值的范围内进行m-1等分，生成m个纵坐标；

按照所述n个横坐标在所述平面直角坐标系中从左至右的排列顺序，将所述n个横坐标依次设置为m*n的矩阵中从左至右的n列数据，生成m*n维度的第一坐标矩阵；

按照所述m个纵坐标在所述平面直角坐标系中从上至下的排列顺序，将所述m个纵坐标依次设置为m*n的矩阵中从上至下的m行数据，生成m*n维度的第二坐标矩阵。

3.根据权利要求1所述的方法，其特征在于，

所述对每个所述修正后的特征图分别作归一化处理之前，所述方法还包括：

按照以热力图的中心点为坐标系原点的热力图坐标系，对所述特征图中按照原始坐标系设置的每个特征点的坐标进行调整。

4.根据权利要求3所述的方法，其特征在于，所述对于每一个目标特征图，将所述目标特征图分别与第一坐标矩阵和第二坐标矩阵作内积运算，生成所述目标特征图对应的目标手部关键点的坐标之后，所述方法还包括：

按照所述原始坐标系，对每个所述手部关键点的坐标进行调整；

将调整后的每个所述手部关键点的坐标映射至所述目标二维图像的坐标系，生成每个所述手部关键点的目标坐标；

按照预设的手部关键点之间的连接顺序，对所述目标二维图像中坐标为所述目标坐标的各个所述手部关键点依次连接，生成所述目标二维图像中的手部姿态图像。

5.根据权利要求1所述的方法，其特征在于，所述对每个所述修正后的特征图分别作归一化处理，生成多个目标特征图，包括：

将每个所述修正后的特征图对应的二维图像转换为一维图像；

对每组所述一维图像分别作归一化处理；

将归一化处理后的每组所述一维图像恢复为对应的归一化处理后的二维图像，生成每个所述手部关键点对应的目标特征图。