[发明专利]一种人眼视线识别方法、装置、系统及存储介质

权利要求书

1.一种人眼视线识别方法，其特征在于，所述方法包括：

获取待检测对象的人脸图像序列，所述人脸图像序列包括至少一张人脸图像；

基于所述人脸图像得到眼部关键点信息，所述眼部关键点信息包括瞳孔中心关键点信息和眼部轮廓关键点信息；

根据所述眼部关键点信息拟合得到眼部轮廓曲线；

基于所述眼部轮廓曲线确定所述人眼视线方向，包括：根据所述眼部轮廓曲线计算眼部的视网焦点坐标(xa，ya，za)；基于所述眼部的视网焦点坐标(xa，ya，za)和瞳孔中心关键点坐标(xb，yb，zb)确定所述人眼视线的方向。

2.如权利要求1所述的方法，其特征在于，所述基于所述人脸图像得到眼部关键点信息包括：

基于所述人脸图像和训练好的人脸关键点检测模型得到人脸关键点信息；

根据所述人脸关键点信息获取眼部区域图像；

将所述眼部区域图像输入局部精细关键点检测模型得到所述眼部关键点信息。

3.如权利要求1所述的方法，其特征在于，根据所述眼部关键点信息拟合得到眼部轮廓曲线，包括：

基于所述眼部轮廓关键点的坐标拟合得到椭圆形状的所述眼部轮廓曲线。

4.如权利要求1所述的方法，其特征在于，根据所述眼部轮廓曲线计算眼部的视网焦点坐标包括：根据所述眼部轮廓曲线计算得到所述眼部轮廓曲线的长轴和短轴；基于所述长轴和短轴计算得到所述视网焦点坐标。

5.如权利要求1所述的方法，其特征在于，所述人眼视线方向包括人眼视线向量的方向，其中，所述人眼视线向量包括眼部的视网焦点坐标和瞳孔中心关键点坐标之差。

6.一种人眼视线识别装置，其特征在于，所述装置包括：

人脸获取模块，用于获取待检测对象的人脸图像序列，所述人脸图像序列包括至少一张人脸图像；

眼部关键点模块，用于基于所述人脸图像得到眼部关键点信息，所述眼部关键点信息包括瞳孔中心关键点信息和眼部轮廓关键点信息；

拟合模块，用于根据所述眼部关键点信息拟合得到眼部轮廓曲线；

计算模块，用于基于所述眼部轮廓曲线确定所述人眼视线的方向，包括：根据所述眼部轮廓曲线计算眼部的视网焦点坐标(xa，ya，za)；基于所述眼部的视网焦点坐标(xa，ya，za)和瞳孔中心关键点坐标(xb，yb，zb)确定所述人眼视线的方向。

7.一种人眼视线识别系统，包括存储器、处理器及存储在所述存储器上且在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至5中任一项所述方法的步骤。

8.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被计算机执行时实现权利要求1至5中任一项所述方法的步骤。