[发明专利]上身姿态重构方法、装置、电子设备及存储介质

说明书

本申请公开了一种上身姿态重构方法，该方法包括：获取用户的头部及双手位置上惯性测量单元传感器采集的6‑DoF姿态信息；基于深度神经网络模型对6‑DoF姿态信息进行计算，得出用户上身关节位置的多个姿态信息；根据多个姿态信息对用户的上身姿态进行三维重构计算，得出用户的上身人体模型。本方法能够有效地追踪用户头部位置和双手位置的6‑DoF姿态信息，完成用户上身人体模型的重构，简化人体模型的重建过程。

技术领域

本申请涉及计算机视觉领域，更具体地，涉及一种上身姿态重构方法、装置、电子设备及存储介质。

背景技术

人体运动姿态捕捉与重构，是利用光纤、视频、地磁和惯性传感器等，在三维空间中准确测量运动物体的运动信息，将采集到的运动数据进一步计算处理之后，在计算机虚拟世界中重构人体的运动模型，从而实现人体运动的再现。其核心技术主要由动作捕捉和虚拟现实组成。随着计算机科学技术的发展，尤其是实时三维图形生成和显示技术的逐渐成熟，人体运动姿态捕捉与重构在运动人体科学研究、影视制作、游戏设计和医疗健康等越来越多的领域体现出了巨大的应用价值。

在虚拟显示的应用中，通常重建用户的全身人体运动模型来实现场景交互，现有相关技术无法直接基于虚拟现实、增强现实及混合现实的设备进行人体运动模型的重建，主要以机械式、声学式和光学式的姿态捕捉来重构模型，机械式由于机械装置结构的限制，只有在动作速率较慢时有不错的捕捉效果，并且需额外在人体不同部位额外添加跟踪模块，用户体验不佳，声学式对场景中的温度、相对湿度和大气压强等参数都比较敏感，而且还会因为环境中的较大遮挡物造成回声而影响捕捉精度，光学式对于环境中光线的照射条件要求较高，且只能是用于已经对摄像机进行标定的特定的场景中，因此，人体运动姿态的捕捉方法存在许多不足，从而对运动模型的重构造成影响。

发明内容

本申请实施例提供一种上身姿态重构方法、装置、电子设备以及存储介质。旨在无需增设额外姿态信息的采集设备，直接利用现有虚拟现实,增强现实及混合现实系统进行用户上身姿态模型的构建，以便简化人体运动姿态捕捉的过程，提高姿态重构的效率。

第一方面，本申请一些实施例提供一种上身姿态重构方法，该方法包括：获取用户的头部及双手位置上惯性测量单元传感器采集的6-DoF姿态信息，基于深度神经网络模型对6-DoF姿态信息进行计算，得出用户上身关节位置的多个姿态信息，根据多个姿态信息对用户的上身姿态进行三维重构计算，得出用户的上身人体模型。

第二方面，本申请一些实施例还提供一种上身姿态重构装置，该装置包括：信息获取模块，用于获取用户的头部及双手位置上惯性测量单元传感器采集的6-DoF姿态信息，姿态计算模块，用于基于深度神经网络模型对6-DoF姿态信息进行计算，得出用户上身关节位置的多个姿态信息，姿态重构模块，用于根据多个姿态信息对用户的上身姿态进行三维重构计算，得出用户的上身人体模型。

第三方面，本申请一些实施例还提供一种电子设备，包括显示屏、处理器以及存储器，存储器存储有计算机程序指令，计算机程序指令被处理器调用时执行上述的上身姿态重构方法。

第四方面，本申请实施例还提供一种计算机可读存储介质，计算机可读存储介质存储有程序代码，其中，在程序代码被处理器运行时执行上述的上身姿态重构方法。

本申请提供的一种上身姿态重构方法，可以获取用户的头部及双手位置上惯性测量单元传感器采集的6-DoF姿态信息，并基于深度神经网络模型对该6-DoF姿态信息进行计算，得出用户上身关节位置的多个姿态信息，进一步地，根据多个姿态信息对用户的上身姿态进行三维重构计算，得出用户的上身人体模型。由此，仅通过追踪用户头部位置和双手位置的6-DoF姿态信息，就可完成用户上身人体模型的重构，从而减少了人体运动姿态捕捉的设备的使用，简化了人体模型的重建过程。

附图说明