[发明专利]一种面部与眼镜匹配方法

说明书

技术领域

本发明涉及图像处理领域，具体涉及一种面部与眼镜匹配方法。

背景技术

人脸识别技术是一系列相关技术的集合体，其包括人脸图像采集、人脸定位、人脸识别预处理、身份确认以及身份查找等；通过系统输入一张或者一系列含有未确定身份的人脸图像，以及人脸数据库中的若干已知身份的人脸图像或者相应的编码，经过定位、边缘检测、特征点提取等一系列环节后，输出则是一系列相似度数值，表明待识别的人脸的身份。可以使用人脸图像采集、定位、边缘检测、特征点提取等技术，构建头部的3D模型，识别头部在三维空间中的姿态及运动轨迹，这些信息可以协助处理头部与眼镜的适配信息。

3D建模是通过编程方式或者三维制作软件通过虚拟三维空间构建出具有三维数据的模型，目前已经被广泛使用，在移动设备上也广泛存在，如OpenGL框架即是在Android、IOS平台上都被广泛使用的图形程序接口。

本发明使用3D建模技术处理眼镜的建模，并利用3D模型的实时渲染技术来处理头部与眼镜的适配动作。

发明内容

本发明的目的是提供一种面部与眼镜匹配方法，以实现基于3D模型技术的用户与眼镜的实时佩戴。

为实现上述目的，本发明实施例提供了一种面部与眼镜匹配方法，所述方法包括：

采集用户的面部图像数据视频流；

根据所述面部图像数据视频流，提取所述用户的面部关键信息；

根据所述面部关键信息，建立所述用户的头部姿态模型；

根据所述头部姿态模型，与眼镜3D模型进行匹配。

优选的，所述根据所述面部图像数据，提取所述用户的面部关键信息，其中，所述的面部关键信息包括：双眼位置、耳朵位置、面部轮廓。

优选的，所述根据所述面部关键信息，建立所述用户的头部姿态模型，具体包括：

根据所述双眼位置，计算瞳距；

根据所述双眼位置，计算面部中心线；

根据所述双眼位置，计算所述用户的头部偏转角；

根据所述面部轮廓与所述双眼位置，确定所述用户的适应镜架宽度。

优选的，所述眼镜3D模型包括眼镜模型的瞳距信息、镜架宽度信息、镜架材质信息、镜片的材质信息以及镜片和境况的颜色信息。

优选的，所述根据所述头部姿态模型，与眼镜3D模型进行匹配，具体包括：

根据所述头部姿态模型中的瞳距和所述眼镜3D模型中第一眼镜的瞳距信息是否匹配，确定所述第一眼镜是否能够使用；

如果所述第一眼镜能够使用，则检查所述头部姿态模型中的适应镜架宽度是否与所述第一眼镜的镜架宽度信息匹配；

在所述头部姿态模型中的适应镜架宽度与所述第一眼镜的镜架宽度信息匹配时，将所述头部姿态模型中的头部偏转角，设定为所述第一眼镜的偏转角度；

根据所述双眼位置信息，以及所述第一眼镜的偏转角度，确定所述第一眼镜的显示位置和显示角度；

按照所述确定的显示位置和显示角度，将所述第一眼镜插入所述用户的面部视频流数据，并显示。

优选的，所述根据所述头部姿态模型中的瞳距和所述眼镜3D模型中第一眼镜的瞳距信息是否匹配，确定所述第一眼镜是否能够使用，其中，

如果所述第一眼镜为非近视镜片，则当所述头部姿态模型中的瞳距在所述第一眼镜的瞳距区间之内时，确定第一眼镜能够使用；

如果所述第一眼镜为近视镜片，则当所述头部姿态模型中的瞳距等于所述第一眼镜的瞳距时，确定所述第一眼镜能够使用。

优选的，所述根据所述双眼位置，计算瞳距；具体为：

定位两个眼睛区域中心位置的距离，作为所述瞳距。

优选的，所述根据所述双眼位置，计算面部中心线；具体为：

将与所述两个眼睛的区域中心连线垂直，且与所述两个眼睛的区域中心连线垂直的线，作为面部中心线。

优选的，所述根据所述双眼位置，计算所述用户的头部偏转角；具体为：

将所述面部中心线与重力线相交的角度作为头部偏转角，其中所述重力线为视角平面内与地平面垂直的一条线。

优选的，所述根据所述面部轮廓与所述双眼位置，确定所述用户的适应镜架宽度，具体为：

沿所述双眼的中心线，画一条直线；

所述直线与所述面部轮廓左右两侧的交点之间的线段的长度，作为适应镜架宽度。

通过本发明实施例提供的方法，可以实现人脸与眼镜模型的实时匹配，将眼镜模型实时适配到用户的面部正确的位置，并且根据用户的需求和环境实时调整，实现用户远程试戴，满足用户的应用体验。