[发明专利]基于人体关键点检测改进演讲者姿体动作的方法及系统

说明书

本发明公开了一种基于人体关键点检测改进演讲者姿体动作的方法及系统，该方法包括：在数据库中存储标准的预设人体关键点数据以及每一组预设人体关键点数据对应的描述语；通过摄像头装置，获取带有深度信息的视频流；从带有深度信息的视频流中提取人体关键点信号，将人体关键点信号与数据库中的预设人体关键点数据进行逐一比对，若人体关键点信号与数据库中预设人体关键点数据的差异小于阈值，判定比对成功，获取组预设人体关键点数据对应的描述语；将描述语语音播报给用户。本发明与传统训练方法相比，具有实时性，效率高同时费用低等优点。

技术领域

本发明涉及教育领域以及计算机视觉领域，尤其涉及一种基于人体关键点检测改进演讲者姿体动作的方法及系统。

背景技术

目前大部分个人在公众演讲时，都会有或多或少自己不易察觉的细微姿体动作这些多余的小动作有时非常影响整体的演讲效果，为了克服这些不利影响，人们通常是通过反复观看录像进行刻意训练或者请专业的指导教练在旁进行监督训练。前一种仅凭录像进行自我学习的效率太低，而后一种由于高昂的费用和指导教练水平的参差不齐，因而很难普及。

发明内容

本发明提供了一种基于人体关键点检测改进演讲者姿体动作的方法及系统，用以解决现有演讲姿体改进效率低以及价格贵的技术问题。

为解决上述技术问题，本发明提出的技术方案为：

一种基于人体关键点检测改进演讲者姿体动作的方法，包括以下步骤：

在数据库中存储标准的预设人体关键点数据以及每一组预设人体关键点数据对应的描述语；

通过摄像头装置，获取带有深度信息的视频流；

从带有深度信息的视频流中提取人体关键点信号，将人体关键点信号与数据库中的预设人体关键点数据进行逐一比对，若人体关键点信号与数据库中预设人体关键点数据的差异小于阈值，判定比对成功，获取组预设人体关键点数据对应的描述语；

将描述语语音播报给用户。

作为本发明的方法的进一步改进：

优选地，若人体关键点信号与数据库中预设人体关键点数据的差异大于或等于阈值时，返回重新获取带有深度信息的视频流，重新提取人体关键点信号，进行比对。

优选地，人体关键点信号为人体2D关键点位置组合，包括：右眼的上眼皮外侧点37、上眼皮内侧点38、下眼皮内侧点40和下眼皮外侧点41的4个关键点位置组成的组合一，左眼的上眼皮内侧点43、上眼皮外侧点44、下眼皮外侧点46和下眼皮内侧点47的4个关键点位置组成的组合二，右眉毛的内侧点21和左眉毛内侧点22的关键点位置组成的组合三。

优选地，人体3D关键点位置组合，包括：左右手各21个关键点的3D点云坐标

优选地，人体3D关键点位置组合，包括：鼻子0、右手腕4和左手腕7的3个关键点的3D点云坐标。

本发明还提供一种基于人体关键点检测改进演讲者姿体动作的系统，包括：

存储模块，用于在数据库中存储标准的预设人体关键点数据以及每一组预设人体关键点数据对应的描述语；

输入模块，用于通过摄像头装置，获取带有深度信息的视频流；

3D人体关键点检测模块，用于从带有深度信息的视频流中提取人体关键点信号输入控制模块；

控制模块，用于将人体关键点信号与数据库中的预设人体关键点数据进行逐一比对，若人体关键点信号与数据库中预设人体关键点数据的差异小于阈值，判定比对成功，获取组预设人体关键点数据对应的描述语；

语音提示模块，用于将描述语语音播报给用户。