[发明专利]一种三维人体模型生成方法、装置、电子设备及存储介质

说明书

本发明公开了一种三维人体模型生成方法，包括：获取在多个视角中拍摄的待检测图像；检测待检测图像包含的人体区域，并检测人体区域中包含的骨骼关键点数据组；利用人体区域及骨骼关键点数据组，构建待检测图像之间的融合亲和性矩阵，并利用融合亲和性矩阵确定人体区域之间的匹配关系；利用匹配关系以及骨骼关键点数据组进行姿态构造，生成三维人体模型；本方法可从多个视角分析人物的姿态，并可提取待检测图像中包含人体区域及骨骼关键点数据，最后可利用人体区域之间的匹配关系及骨骼关键点数据组生成三维人体模型，可全面有效还原人体三维姿态；本发明还提供一种三维人体模型生成装置、电子设备及存储介质，具有上述有益效果。

技术领域

本发明涉及三维人体模型领域，特别涉及一种三维人体模型生成方法、装置、电子设备及存储介质。

背景技术

随着监控摄像头的广泛使用，视频监控和分析已在众多场景中得到应用。在相关技术中，视频监控及分析方案基于单个视角进行监控和分析，只能从单个视角对视频画面中出现的人物进行姿态分析，难以全面有效地重构人物的三维姿态，进而难以全面有效地分析人物的姿态及运动情况。

发明内容

本发明的目的是提供一种三维人体模型生成方法、装置、电子设备及存储介质，可从多个视角分析人物的姿态，并可提取待检测图像中包含人体区域及骨骼关键点数据，最后可利用人体区域之间的匹配关系及骨骼关键点数据组生成三维人体模型，可全面有效还原人体三维姿态。

为解决上述技术问题，本发明提供一种三维人体模型生成方法，包括：

获取在多个视角中拍摄的待检测图像；

检测所述待检测图像包含的人体区域，并检测所述人体区域中包含的骨骼关键点数据组；

利用所述人体区域及所述骨骼关键点数据组，构建所述待检测图像之间的融合亲和性矩阵，并利用所述融合亲和性矩阵确定所述人体区域之间的匹配关系；

利用所述匹配关系以及所述骨骼关键点数据组进行姿态构造，生成三维人体模型。

可选地，所述检测所述待检测图像包含的人体区域，并检测所述人体区域中包含的骨骼关键点数据组，包括：

在所述待检测图像中执行人体检测操作，得到所述待检测图像包含的人体区域；

在所述人体区域中执行人体骨骼关键点检测，得到所述人体区域包含的骨骼关键点数据组。

可选地，所述在所述人体区域中执行人体骨骼关键点检测之前，还包括：

将所述人体区域输入空间变换网络进行修正计算，得到修正后的人体区域；

利用修正后的人体区域执行所述在所述人体区域中执行人体骨骼关键点检测的步骤。

可选地，所述利用所述人体区域及所述骨骼关键点数据组，构建所述待检测图像之间的融合亲和性矩阵，包括：

计算所述人体区域之间的外观相似度，并利用所述外观相似度构建所述待检测图像之间的外观亲和性矩阵；

利用所述骨骼关键点数据组计算所述人体区域之间的几何相似度，并利用所述几何相似度构建所述待检测图像之间的几何亲和性矩阵；

利用所述外观亲和性矩阵及所述几何亲和性矩阵，构建所述待检测图像之间的融合亲和性矩阵。

可选地，当所述视角的数量为两个时，所述利用所述融合亲和性矩阵确定所述人体区域之间的匹配关系，包括：

创建所述待检测图像之间的初始置换矩阵，并计算所述初始置换矩阵与所述融合亲和性矩阵的内积；所述初始置换矩阵表示所述待检测图像包含的人体区域之间的初始匹配关系；