[发明专利]多场景多姿态的人体穴位自动识别方法、装置及系统

说明书

本发明提供了一种多场景多姿态的人体穴位自动识别方法、装置及系统，该方法包括：获取人体图像；将人体图像输入预先训练的多场景多姿态人体穴位识别模型，识别得到人体图像中的穴位；多场景多姿态人体穴位识别模型包括用于检测目标身体区域的目标检测网络及识别目标身体区域中指定穴位的关键点检测网络；多场景多姿态人体穴位识别模型由经过人体穴位标注的多场景、多姿态的人体图像训练得到。本发明实施例中人体穴位识别模型经过人体穴位标注的多场景、多姿态的人体图像训练得到，可以在多种场景和多种人体姿态下准确识别出指定穴位，适用性更强，可以应用于自动化医疗设备。

技术领域

本发明涉及人体穴位识别技术领域，具体而言，涉及一种多场景多姿态的人体穴位自动识别方法、装置及系统。

背景技术

穴位在中医理论中占有重要地位，在针灸、推拿、点按治疗中发挥着重要作用，穴位的识别大多由经验丰富的专业人士完成。然而这种依靠经验对人体穴位进行识别的方式，可用性受到限制、无法适用于自动化医疗设备。

发明内容

为解决上述问题，本发明实施例提供一种多场景多姿态的人体穴位自动识别方法，所述方法包括：获取人体图像；将所述人体图像输入预先训练的多场景多姿态人体穴位识别模型，识别得到所述人体图像中的穴位；所述多场景多姿态人体穴位识别模型包括用于检测目标身体区域的目标检测网络及识别所述目标身体区域中指定穴位的关键点检测网络；所述多场景多姿态人体穴位识别模型由经过人体穴位标注的多场景、多姿态的人体图像训练得到。

可选地，所述多场景多姿态人体穴位识别模型的训练过程包括：获取多场景、多姿态的多张人体图像；所述多张人体图像在以下至少一个方面不同：背景、光照条件、拍摄距离、上肢与身体躯干的夹角、上臂与前臂的夹角、身体左侧或者身体右侧、性别、年龄；对所述多张人体图像进行穴位标注及身体区域矩形框标注；所述穴位标注包括穴位类别标注及穴位位置标注；对标注后的所述多张人体图像进行预处理；所述预处理包括以下至少一项：旋转、反转、增加高斯噪声、部分遮挡；根据预处理后的所述多张人体图像对所述目标检测网络及所述关键点检测网络分别进行训练至收敛。

可选地，所述多场景多姿态人体穴位识别模型的训练过程包括：根据预处理后的所述多张人体图像对预训练模型进行微调，待所述预训练模型收敛后得到训练完成的目标检测网络。

可选地，所述多场景多姿态人体穴位识别模型的训练过程包括：将关键点检测网络最后的输出维度修改为穴位类别的总数量；对所述关键点检测网络的模型参数进行随机初始化；根据预处理后的所述多张人体图像对预训练模型对随机初始化后的所述关键点检测网络进行训练。

可选地，所述关键点检测网络为Glasshour网络，训练过程采用优化算法为随机梯度下降，代价函数为Wingloss，函数表达式如下：

式中限制非线性部分的范围区间[-w,w]，x表示预测值与标注值之间的差值，∈为一个很小的数，C为一个常数。

可选地，所述识别得到所述人体图像中的穴位包括：在所述人体图像中标注出穴位类别及穴位位置，以及将标注后的所述人体图像输出。

可选地，所述身体区域矩形框包括：上臂侧面矩形框、前臂侧面矩形框、上肢侧面整臂矩形框、上臂内侧矩形框、前臂内侧矩形框、上肢内侧矩形框。

本发明实施例提供一种多场景多姿态的人体穴位自动识别装置，所述装置包括：图像获取模块，用于获取人体图像；穴位识别模块，用于将所述人体图像输入预先训练的多场景多姿态人体穴位识别模型，识别得到所述人体图像中的穴位；所述多场景多姿态人体穴位识别模型包括用于检测目标身体区域的目标检测网络及识别所述目标身体区域中指定穴位的关键点检测网络；所述多场景多姿态人体穴位识别模型由经过人体穴位标注的多场景、多姿态的人体图像训练得到。