[发明专利]人体骨骼关键点提取方法及计算机可读存储介质

说明书

本发明公开了一种人体骨骼关键点提取方法及计算机可读存储介质，方法包括：从深度摄像机获取同一时刻的彩色图和深度图，并同步所述彩色图和深度图的位置；在所述彩色图中进行人体检测，得到人体检测框；根据所述人体检测框和深度图，计算人体区域深度平均值；根据所述人体区域深度平均值，对所述深度图进行滤波，得到人体深度图；根据所述彩色图，对所述人体深度图进行修正；根据修正后的人体深度图，提取人体骨骼关键点。本发明在保证识别效率的基础上提升了人体骨骼关键点的识别效果。

技术领域

本发明涉及图像处理技术领域，尤其涉及一种人体骨骼关键点提取方法及计算机可读存储介质。

背景技术

人体骨骼关键点提取算法属于人体姿势识别算法的一种，已经成功应用于一些体感游戏中。根据用户是否需要穿戴额外设备，可分为设备主动反馈和相机被动识别两种。由于设备主动反馈需要用户穿戴特定的设备，如智能手套等，在易用性上输于相机被动识别。

相机被动识别算法根据相机的不同，又分为彩色图识别算法和深度图识别算法。彩色图识别算法的代表有Face++的Skeleton Detection API，poseNet等，深度图识别算法的代表有PrimeSensor的NiTE。前者只利用了彩色图信息，识别效果容易被背景干扰，导致肢体的漏检和误检；后者利用深度信息，克服了背景的干扰，但当肢体靠近身体躯干时难以分辨(如手臂靠近躯干时)。

现有的基于相机被动识别的算法不是计算复杂度高，就是准确度不高，或者需要手工干预。

发明内容

本发明所要解决的技术问题是：提供一种人体骨骼关键点提取方法及计算机可读存储介质，在保证识别效率的基础上提升了人体骨骼关键点的识别效果。

为了解决上述技术问题，本发明采用的技术方案为：一种人体骨骼关键点提取方法，包括：

从深度摄像机获取同一时刻的彩色图和深度图，并同步所述彩色图和深度图的位置；

在所述彩色图中进行人体检测，得到人体检测框；

根据所述人体检测框和深度图，计算人体区域深度平均值；

根据所述人体区域深度平均值，对所述深度图进行滤波，得到人体深度图；

根据所述彩色图，对所述人体深度图进行修正；

根据修正后的人体深度图，提取人体骨骼关键点。

本发明还涉及一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现如上所述的步骤。

本发明的有益效果在于：首先通过彩色图检测得到人体检测框，得到人体的大致位置，接着根据人体检测框，在深度图中提取人体区域，修正人体轮廓，得到人体深度图，然后通过彩色图，修正人体深度图中的肢体粘连现象，得到修正后的人体深度图，最后在修正后的人体深度图上检测、跟踪人体骨骼关键点。本发明结合了深度距离信息与彩图颜色信息，并利用两者信息相互修正，在保证识别效率的基础上提升了人体骨骼关键点的识别效果。

附图说明

图1为本发明的一种人体骨骼关键点提取方法的流程图；

图2为本发明实施例一的方法流程图；

图3为本发明实施例一的与彩色图位置同步之后的深度图；

图4为本发明实施例一的人体检测框的示意图。

具体实施方式

为详细说明本发明的技术内容、所实现目的及效果，以下结合实施方式并配合附图详予说明。

本发明最关键的构思在于：使用彩色图与深度图互相修正的方式，避免了手臂靠近躯干时深度图粘连对对后续提取算法的干扰。