[发明专利]一种基于人脸面部肌肉运动特征的面部神经麻痹疾病检测方法

权利要求书

1.一种基于人脸面部肌肉运动特征的面部神经麻痹疾病检测方法，其特征在于：含有以下步骤：

步骤1、通过人脸检测算法获得相机视野中人脸的位置，采集图像数据，输出人脸图像；

步骤2、根据人脸图像重建3D模型；

步骤3、获取人脸3D模型上相关肌肉对应的网格点的坐标；

步骤4、对人脸图像进行角点检测，获得肌肉上的角点特征，并根据角点修正面部肌肉的运动特征；

步骤5、为人脸3D mensh的网格点分配权重；

步骤6、根据面部肌肉运动特征和角点位置的变化特征获得面部肌肉的运动幅度。

2.根据权利要求1所述的基于人脸面部肌肉运动特征的面部神经麻痹疾病检测方法，其特征在于：所述步骤1中利用手机的前置相机采集用户的图像数据。

3.根据权利要求1所述的基于人脸面部肌肉运动特征的面部神经麻痹疾病检测方法，其特征在于：所述步骤2中通过PRNet、VRNet或2DASL深度神经网络获得面部的3D模型，通过2DASL深度神经获得3DMM模型的参数，输出的参数作用在该3DMM模型上，使其变形为和图像中人脸一样的形状和纹理。

4.根据权利要求1所述的基于人脸面部肌肉运动特征的面部神经麻痹疾病检测方法，其特征在于：所述步骤3中从人脸3D mensh上选取分布在双目下方、鼻子两侧、两嘴角周围和颧骨周围的所有网格点，其分布在口轮匝肌、咬肌、提上唇肌和颊肌上，通过肌肉上的网格点的位置变化来计算肌肉的运动特征。

5.根据权利要求1所述的基于人脸面部肌肉运动特征的面部神经麻痹疾病检测方法，其特征在于：所述步骤4含有以下分步骤：

步骤4.1、将角点和3D mensh的网格点相结合实现优势互补，将角点的位置融入3Dmensh；

1)人脸3D mensh是和人脸图像上的人脸对齐后，获取角点的位置，将该位置反向投影回3D mensh上，获得角点在3D mensh上对应的三维坐标P；

2)获取坐标P周围最近的四个网格点的位置为，构建一个序列ΔP＝{||PP_i||₂}_{i＝1，2，3，4}＝{||PP₁||₂，||PP₂||₂，||PP₃||₂，||PP₄||₂}，||PP_i||₂表示坐标P和坐标P_i的欧式距离，i＝1，2，3，4，序列ΔP反映坐标P与周围最近的四个网格点的欧式距离；

3)构建四个权重系数α₁，α₂，α₃，α₄，分别表示四个网格点对坐标位置P的关注程度，令：i＝1，2，3，4；sum(ΔP)表示对序列ΔP的元素求和，网格点P_i与坐标位置P的距离越近，α_i就越大，说明P_i对P的关注程度越高，并且满足α₁+α₂+α₃+α₄＝3；

4)对于网格点P_i，使用下式对其进行更新：P_i：＝α_iP+(1-α_i)P_i；

步骤4.2、对于第j个网格点，其在N帧图像上的位置序列为D_j＝{D_1，j，D_2，j，D_i，j，...，D_N，j}，D_i，j表示第j个网格点在第i帧图像上的位置，第j个网格点的运动幅度方法如下：

1)计算边缘的网格点的坐标的均值为令：符号“：＝”表示将符号右边的表达式的结果赋值给符号左边的变量；

2)首先获得第j个网格点的在当前第i帧的最小运动幅度，方法如下：计算当前第i帧的第j个网格点D_i，j与前i-1帧图像中每帧的第j个网格点的欧式距离L_i，L_i＝{L_i，1，L_i，2，...，L_i，m，...，L_i，i-1}，L_i，m表示第i帧的第j个网格点D_i，j与第m帧的第j个网格点D_m，j的欧式距离，即L_i，m＝||D_i，jD_m，j||₂，设前i帧中第j个网格点的最小运动幅度为Lmin_i，则：Lmin_i＝min(min(L_i)，Lmin_i-1)，i＞2，min(L_i)表示序列L_i中最小的元素值，Lmin_i-1表示前i-1帧中第j个网格点的最小运动幅度，其中Lmin₂＝||D_2，jD_1，j||₂，Lmin_i表示前i帧中第j个网格点的最小运动范围，通常该值比较小，等于或趋近于0；

3)同理获得当前第i帧第j个关键点的最大运动程度Lmax_i，表示在前i帧中网格点最大的运动范围，Lmax_i与Lmin_i的算法一样；

4)则第j个网格点的运动幅度为M_j：

5)M_j越大表示第j个网格点的运动范围越大，说明第j个网格点处的肌肉的运动能力越强。