[发明专利]关键点检测方法、装置、设备及可读介质

权利要求书

1.一种关键点检测方法，其特征在于，包括：

从显示有用户图像的视频帧序列中，选取当前视频帧以及当前视频帧之前的第一历史视频帧；

从当前视频帧中，检测各关键点的初始位置信息；

根据背景像素点在第一历史视频帧中的位置信息以及在当前视频帧中的初始位置信息，确定背景图像的运动矢量；

根据各关键点在第一历史视频帧中的位置信息以及所述背景图像的运动矢量，分别确定当前视频帧中各关键点的参考位置信息；

根据各关键点的初始位置信息和参考位置信息，分别得到当前视频帧中各关键点的位置信息。

2.根据权利要求1所述的方法，其特征在于，在从当前视频帧中，检测各关键点的初始位置信息之前，还包括：

选取当前视频帧之前的第二历史视频帧；

所述从当前视频帧中，检测各关键点的初始位置信息，包括：

在当前视频帧中，确定包括各关键点的候选框；

通过光流，将第二历史视频帧中包括各关键点的回归框映射至当前视频帧中，得到当前视频帧的参考回归框；

根据候选框和参考回归框，得到当前视频帧中的回归框；

从当前视频帧中的回归框中，检测各关键点的初始位置信息。

3.根据权利要求2所述的方法，其特征在于，所述根据候选框和参考回归框，得到当前视频帧中的回归框，包括：

对候选框和参考回归框进行非极大值抑制，得到当前视频帧中的回归框。

4.根据权利要求2所述的方法，其特征在于，所述通过光流，将第二历史视频帧中包括各关键点的回归框映射至当前视频帧中，得到当前视频帧的参考回归框，包括：

根据背景像素点在第二历史视频帧中的位置信息以及在当前视频帧中的初始位置信息，确定背景图像的运动矢量；

根据包括各关键点的回归框在第二历史视频帧中的位置信息以及所述背景图像的运动矢量，确定当前视频帧中包括各关键点的参考回归框。

5.根据权利要求1所述的方法，其特征在于，所述根据各关键点的初始位置信息和参考位置信息，分别得到当前视频帧中各关键点的位置信息，包括：

根据各关键点的初始位置信息的置信度和参考位置信息的置信度，分别得到当前视频帧中，置信度满足第一预设要求的各关键点的位置信息。

6.根据权利要求5所述的方法，其特征在于，所述根据各关键点的初始位置信息的置信度和参考位置信息的置信度，分别得到当前视频帧中，置信度满足第一预设要求的各关键点的位置信息，包括：

所述第一预设要求包括置信度最大，或者置信度大于等于置信度阈值。

7.根据权利要求5所述的方法，其特征在于，所述根据各关键点的初始位置信息的置信度和参考位置信息的置信度，分别得到当前视频帧中，置信度满足第一预设要求的各关键点的位置信息，包括：

确定当前视频帧的第一权值，以及第一历史视频帧的第二权值；

采用第一权值对各关键点的初始位置信息的置信度进行加权，得到各关键点的第一加权后置信度；

采用第二权值对各关键点的参考位置信息的置信度进行加权，得到各关键点的第二加权后置信度；

从各关键点的第一加权后置信度和第二加权后置信度中，分别选择满足第二预设要求的加权后置信度对应的位置信息，作为当前视频帧中各关键点的位置信息。

8.根据权利要求1所述的方法，其特征在于，所述根据各关键点的初始位置信息和参考位置信息，分别得到当前视频帧中各关键点的位置信息，包括：

根据各关键点的初始位置信息与参考位置信息的距离的倒数，分别确定各关键点的参考位置信息的第三权值；

采用第三权值和默认权值分别对参考位置信息和初始位置信息进行加权平均，得到当前视频帧中各关键点的位置信息。