[发明专利]关键点检测方法、手势识别方法、装置及系统

权利要求书

1.一种关键点检测方法，其特征在于，所述方法包括：

获取待检测图像，所述待检测图像中包含有目标对象；

对所述待检测图像进行目标检测，得到每个所述目标对象的位置框；

基于每个所述目标对象的位置框进行位置框合并，得到目标合并框；其中，所述目标合并框对应的图像中包括相接触的至少两个目标对象；

基于所述目标合并框和检测模型对所述待检测图像进行关键点检测，得到每个所述目标对象的多个热力图；其中，不同的所述热力图用于表征位于所述目标对象上不同位置处的关键点；所述检测模型是基于多张标注有目标对象的关键点位置的训练图像训练得到的，所述训练图像中包括相接触的至少两个目标对象；

基于所述热力图确定相接触的各所述目标对象的关键点。

2.根据权利要求1所述的方法，其特征在于，所述基于每个所述目标对象的位置框进行位置框合并，得到目标合并框的步骤，包括：

基于每个所述目标对象的位置框，对位置框重复执行预设的合并操作，直至任意两个位置框之间的重叠度均不大于预设重叠度阈值，得到目标合并框。

3.根据权利要求1所述的方法，其特征在于，所述基于每个所述目标对象的位置框进行位置框合并，得到目标合并框的步骤，包括：

基于每个所述目标对象的位置框，对位置框重复执行预设的合并操作，直至任意两个位置框之间的重叠度均不大于预设重叠度阈值，得到候选合并框；

根据所述候选合并框中所包含的目标对象的数量，从所述候选合并框中筛选得到目标合并框。

4.根据权利要求2或3所述的方法，其特征在于，所述合并操作包括：

从多个位置框中确定待合并的位置框对；其中，所述位置框对包括两个位置框；

计算所述位置框对中位置框之间的重叠度；

如果计算的重叠度大于预设重叠度阈值，将所述位置框对中的位置框合并为新的位置框；其中，所述新的位置框的边界为根据所述位置框对中的两个位置框的边界确定的。

5.根据权利要求4所述的方法，其特征在于，所述从多个位置框中确定待合并的位置框对的步骤，包括：

获取位置框的置信度；

按照各位置框的置信度对所述位置框进行排序，得到位置框排序结果；

根据所述位置框排序结果从多个位置框中确定待合并的位置框对。

6.根据权利要求5所述的方法，其特征在于，所述获取位置框的置信度的步骤，包括：

获取所述位置框对中两个位置框的置信度，根据所述两个位置框的置信度获得所述新的位置框的置信度。

7.根据权利要求1所述的方法，其特征在于，所述基于所述目标合并框对所述待检测图像进行关键点检测，得到每个所述目标对象的多个热力图的步骤，包括：

基于所述目标合并框从所述待检测图像中抠取局部图像；所述局部图像中包含有相接触的目标对象；

对所述局部图像进行尺寸调整，并对尺寸调整之后的局部图像进行关键点检测，得到每个所述目标对象的多个热力图。

8.根据权利要求7所述的方法，其特征在于，所述对尺寸调整之后的局部图像进行关键点检测，得到每个所述目标对象的多个热力图的步骤，包括：

通过训练后的检测模型对尺寸调整之后的局部图像进行关键点检测，得到每个所述目标对象的多个热力图。