[发明专利]眼球追踪方法及相关产品有效
申请号: | 201910503429.5 | 申请日: | 2019-06-11 |
公开(公告)号: | CN110245601B | 公开(公告)日: | 2022-03-01 |
发明(设计)人: | 王文东;陈岩;方攀 | 申请(专利权)人: | OPPO广东移动通信有限公司 |
主分类号: | G06V40/16 | 分类号: | G06V40/16;G06V40/19;G06V10/40;G06F3/01 |
代理公司: | 深圳市慧实专利代理有限公司 44480 | 代理人: | 马友鹏 |
地址: | 523860 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 眼球 追踪 方法 相关 产品 | ||
1.一种眼球追踪方法,其特征在于,应用于电子设备,所述电子设备包括前置红外灯、前置RGB摄像头、前置深度摄像头、显示屏和处理器,所述方法包括:
在所述前置红外灯对目标对象进行照射时,通过所述前置RGB摄像头获取所述目标对象的眼部区域的RGB图像,以及通过所述前置深度摄像头获取所述眼部区域的深度图像;
所述处理器根据所述RGB图像确定所述目标对象的瞳孔在所述RGB图像上的第一位置;所述处理器根据所述深度图像将所述第一位置进行校准得到第二位置,其中,所述第二位置为校准后的目标对象的瞳孔在RGB图像上对应的位置;
所述处理器根据所述第二位置确定所述目标对象的眼球关注所述显示屏上的目标位置;
其中,所述处理器根据所述深度图像将所述第一位置进行校准,得到第二位置,包括:
所述处理器根据所述第一位置对应的深度图像中的深度信息确定所述第一位置与所述电子设备之间的第一距离;选取所述RGB图像中以所述第一位置为中心的第一半径区域中的多个像素点;根据所述多个像素点对应的深度图像中的深度信息确定所述多个像素点中每一像素点对应的参考距离,得到多个参考距离;根据所述RGB图像中第一位置为中心的第二半径区域中除所述第一半径区域以外的部分区域对应的深度图像中的深度信息确定所述部分区域与所述电子设备之间的第二距离,所述第一半径区域的第一半径小于所述第二半径区域的第二半径;确定所述多个像素点对应的多个参考距离中与所述第一距离和第二距离中较大的距离更加接近的多个目标距离对应的多个目标像素点,所述多个目标距离与所述多个目标像素点一一对应;根据所述多个目标像素点确定所述RGB图像中的第二位置。
2.根据权利要求1所述的方法,其特征在于,所述处理器根据所述RGB图像确定所述目标对象的瞳孔在所述RGB图像上的第一位置,包括:所述处理器对所述RGB图像进行人眼特征提取,得到所述目标对象的瞳孔特征点;根据所述瞳孔特征点确定所述瞳孔在所述RGB图像中的第一位置。
3.根据权利要求1所述的方法,在所述选取所述RGB图像中以所述第一位置为中心的第一半径区域中的多个像素点之前,所述方法还包括:
所述处理器根据预设的距离与半径之间的对应关系确定与所述第一距离对应的第一半径。
4.根据权利要求1-3任一项所述的方法,其特征在于,
所述处理器根据所述第二位置确定所述目标对象的眼球关注所述显示屏上的目标位置,包括:所述处理器获取所述前置RGB摄像头的工作参数和所述显示屏的显示参数;根据所述工作参数和所述显示参数将所述第一位置转换为所述目标位置。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于OPPO广东移动通信有限公司,未经OPPO广东移动通信有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910503429.5/1.html,转载请声明来源钻瓜专利网。