[发明专利]3D热力图生成的方法、系统、存储介质及电子设备

说明书

本发明实施例提供一种3D热力图生成的方法、系统、存储介质及电子设备，该方法包括：周期性从深度摄像头录制的RGB视频和深度视频获取RGB图像和对应的深度图像，根据所述RGB图像、所述深度图像以及所述深度摄像头相对于所述目标场景的空间坐标，获取关键点在所述目标场景中的空间坐标，以及基于每个周期的关键点的空间坐标的方法，能够生成所述目标场景的3D热力图。相比于现有技术中的热力图，能够对目标场景中的任意空间中的位置的热力信息进行显示，从而提升了热力图显示热力信息的全面性。

技术领域

本发明涉及物流及计算机技术领域，具体而言，涉及一种3D热力图生成的方法、系统、存储介质及电子设备。

背景技术

热力图是一种以特殊高亮的形式显示访客热衷的页面区域和访客所在的地理区域的图示。热力图可以显示不可点击区域发生的事情。

目前，在零售行业，店铺热力图已经被广泛的应用于店铺的客流分析。通过观察热力图上的颜色变化，根据颜色的深浅来判断人气区域，一般区域块的颜色越深人群越集中，颜色越浅则人群就越分散。

现有技术中，通常是通过监控视频识别人流，确定客户在店铺中的停留位置；在店铺中，停留的客户人数越多，时间越长，则该地点在热力图中的颜色越深。图1是本发明实施例中示出的一种现有技术中的商超的热力图。

在实现本发明的过程中，发明人发现现有技术中至少存在以下技术问题：

现有技术中的热力图的显示方式为2d显示，对空间中的位置的热力信息显示不全，如图1中的热力图，无法显示在整个商超中，每一层货架的热力信息。

因此，需要一种新的3D热力图生成的方法、系统、存储介质及电子设备。

在所述背景技术部分公开的上述信息仅用于加强对本发明的背景的理解，因此它可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

有鉴于此，本发明提供一种3D热力图生成的方法、系统、存储介质及电子设备，能够生成对空间中的位置信息显示更加全面的3D热力图。

本发明的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本发明的实践而习得。

根据本发明的第一方面，提供一种3D热力图生成的方法，其中，在目标场景中包括至少一个深度摄像头，所述方法包括：

周期性从深度摄像头录制的RGB视频和深度视频获取RGB图像和对应的深度图像；

根据所述RGB图像、所述深度图像以及所述深度摄像头相对于所述目标场景的空间坐标，获取关键点在所述目标场景中的空间坐标；

基于每个周期的关键点的空间坐标，生成所述目标场景的3D热力图。

根据一些实施例，根据所述RGB图像、所述深度图像以及所述深度摄像头相对于所述目标场景的空间坐标，获取关键点在所述目标场景中的空间坐标，包括：

从所述RGB图像中提取关键点的RGB图像坐标；

基于所述RGB图像坐标获取所述关键点的深度坐标；

基于所述关键点的RGB图像坐标、深度坐标以及所述深度摄像头相对于所述目标场景的空间坐标，获取所述关键点在所述目标场景中的空间坐标。

根据一些实施例，从所述RGB图像中提取关键点的RGB图像坐标，包括：

基于行人检测算法，从所述RGB图像中标记行人框；

根据所述行人框以及人体关键点检测算法，提取行人的五个指尖和手腕的RGB图像坐标；

根据所述五个指尖和手腕的RGB图像坐标，计算出手掌的中心或重心，将所述中心或者重心的RGB图像坐标作为关键点的RGB图像坐标。。