[发明专利]视线估计方法、装置、设备及存储介质

说明书

本公开实施例涉及一种视线估计方法、装置、设备及存储介质，通过获取对象的眼部图像，基于对象的眼部图像以及对象眼部的至少一张参考图像，确定对象的眼部图像上的眼睛与各参考图像上的眼睛的视线方向的差值，以及各参考图像对对应的眼部图像的视线估计值的影响权重；基于对象的眼部图像上的眼睛与各参考图像上的眼睛的视线方向的差值，各参考图像对对象眼部图像的视线估计值的影响权重，以及各参考图像上包括的关于视线方向的标记信息，确定眼部图像上的眼睛的视线方向。本公开实施例能够提高视线估计的准确性。

技术领域

本公开实施例涉及图像识别技术领域，尤其涉及一种视线估计方法、装置、设备及存储介质。

背景技术

相关技术提供的视线估计方法可以基于眼部图像估计得到图像中眼睛的视线方向。但是由于实际中每个生物体的眼睛的内部/外部结构都不一样，经常会导致视线估计的结果不准确，因此，如何提高视线估计的准确性是本领域需要解决的技术问题。

发明内容

为了解决上述技术问题或者至少部分地解决上述技术问题，本公开实施例提供了一种视线估计方法、装置、设备及存储介质。

本公开实施例的第一方面提供了一种视线估计方法，该方法包括：获取对象的眼部图像；基于所述眼部图像以及所述对象的眼部的至少一张参考图像，确定所述眼部图像上的眼睛与各参考图像上的眼睛的视线方向的差值，以及各参考图像对所述眼部图像的视线估计值的影响权重，所述参考图像上包括所述参考图像上的眼睛的视线方向的标记信息；基于所述眼部图像上的眼睛与各参考图像上的眼睛的视线方向的差值、各参考图像对所述眼部图像的视线估计值的影响权重，以及各参考图像上的所述标记信息，确定所述眼部图像上的眼睛的视线方向。

本公开实施例的第二方面提供了一种视线估计装置，该视线估计装置包括：

获取模块，用于获取对象的眼部图像；

第一确定模块，用于基于所述眼部图像以及所述对象的眼部的至少一张参考图像，确定所述眼部图像上的眼睛与各参考图像上的眼睛的视线方向的差值，以及各参考图像对所述眼部图像的视线估计值的影响权重，所述参考图像上包括所述参考图像上的眼睛的视线方向的标记信息；

第二确定模块，用于基于所述眼部图像上的眼睛与各参考图像上的眼睛的视线方向的差值、各参考图像对所述眼部图像的视线估计值的影响权重，以及各参考图像上的所述标记信息，确定得到所述眼部图像上的眼睛的视线方向。

本公开实施例的第三方面提供了一种终端设备，该终端设备包括存储器和处理器，其中，存储器中存储有计算机程序，当该计算机程序被处理器执行时，可以实现上述第一方面的方法。

本公开实施例的第四方面提供了一种计算机可读存储介质，该存储介质中存储有计算机程序，当该计算机程序被处理器执行时，可以实现上述第一方面的方法。

本公开实施例提供的技术方案与现有技术相比具有如下优点：

本公开实施例，通过获取对象的眼部图像，基于对象的眼部图像以及对象眼部的至少一张参考图像，确定对象的眼部图像上的眼睛与各参考图像上的眼睛的视线方向的差值，以及各参考图像对对应的眼部图像的视线估计值的影响权重；基于对象的眼部图像上的眼睛与各参考图像上的眼睛的视线方向的差值，各参考图像对对象眼部图像的视线估计值的影响权重，以及各参考图像上包括的关于视线方向的标记信息，确定眼部图像上的眼睛的视线方向。本公开实施例通过综合多个参考图像上的眼睛与对象的眼部图像上的眼睛的视线方向的差值，以及多个参考图像对对象眼部图像的视线估计值的影响权重对对象眼部图像上的眼睛的视线估计值进行校正，能够提高视线估计的准确性。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。