[发明专利]一种视线的追踪方法及电子设备

说明书

本申请提供了一种视线的追踪方法，应用于电子设备，获取面部图像，建立第一视线方向向量，所述第一视线方向向量基于所述面部图像中眼部区域图像和虹膜区域图像确定；计算所述面部图像中第一三维面部姿态角度；基于所述眼部区域图像和所述虹膜区域图像，更新所述第一三维面部姿态角度，获得第二三维面部姿态角度；基于所述第二面部三维姿态角度和所述第一视线方向向量，获得第二视线方向向量，从而实现了视线追踪。

技术领域

本申请涉及终端技术领域，尤其涉及一种视线的追踪方法及电子设备。

背景技术

视线跟踪的目的是在视频或图像中，对连续存在的人眼目标的视线方向进行连续检测，视线方向主要为由脸部或眼部指向待观测物的向量，结合与待观测物的相对位置信息，可用于估计待测物的位置信息。视线跟踪技术是人脸活体检测、疲劳监测、人眼对焦、视线控制、视线交互、VR等技术的基础，具有重要的地位。

现有相关的视线跟踪技术中，大多通过将眼部区域的能量强度和边界强度相结合以定位眼睛虹膜中心，基于曲率尺度空间和模板匹配复检的方法进行眼角位置探测，构建由虹膜中心指向眼角的眼矢量，建立起由眼矢量至视线目标上的视线点的映射关系，结合映射关系进行实现追踪。

申请人发现，上述方案的缺点是，由于采用了固定的映射方式，如果眼矢量的计算存在较大偏差，预测结果将存在较大偏差，而在计算眼部虹膜中心和眼角时采用了固定人脸模型和模板来进行检测，这样会导致复杂光照情况下眼部虹膜中心和眼角定位不够准确。

发明内容

本申请提供了一种视线的追踪方法及电子设备，本申请还提供一种计算机可读存储介质，以提供一种视线的追踪方法，以提高实现追踪的准确性。

第一方面本申请提供了一种视线的追踪方法，应用于电子设备，方法包括：

获取面部图像，建立第一视线方向向量，第一视线方向向量基于面部图像中眼部区域图像和虹膜区域图像确定；

计算面部图像中第一三维面部姿态角度；

基于眼部区域图像和虹膜区域图像，更新第一三维面部姿态角度，获得第二三维面部姿态角度；

基于第二面部三维姿态角度和第一视线方向向量，获得第二视线方向向量。

进一步地，建立第一视线方向向量，包括：

获取眼部区域关键点坐标；

基于眼部区域关键点坐标，确定第一目标区域，其中，第一目标区域内的图像为眼部区域图像，第一目标区域为包围关键点坐标的最小区域；

对对象的眼部区域图像进行椭圆拟合，获取虹膜区域图像；

基于眼部区域图像和虹膜区域图像，建立第一视线方向向量。

进一步地，建立第一视线方向向量，包括：

获取眼部区域关键点坐标；

基于眼部区域关键点坐标，确定第一目标区域，其中，第一目标区域为包围眼部区域关键点坐标的最小区域；

将第一目标区域放大预设倍数，确定第二目标区域，第二目标区域内的图像为眼部区域图像；

对眼部区域图像进行椭圆拟合，获取虹膜区域图像；

基于眼部区域图像和虹膜区域图像，建立第一视线方向向量。

进一步地，基于眼部区域图像和虹膜区域图像，更新第一三维面部姿态角度，获得第二三维面部姿态角度，包括：

计算虹膜区域图像的中心坐标在水平方向占眼部图像的宽度比例，以及在竖直方向占眼部图像的高度比例；

基于宽度比例、高度比例以及眼部区域图像的中心坐标，计算偏差值；