[发明专利]眼睛视线的检测方法、装置、设备及存储介质在审
申请号: | 202010301951.8 | 申请日: | 2020-04-16 |
公开(公告)号: | CN111488845A | 公开(公告)日: | 2020-08-04 |
发明(设计)人: | 黄少光;许秋子 | 申请(专利权)人: | 深圳市瑞立视多媒体科技有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06N3/04;G06N3/08 |
代理公司: | 北京市京大律师事务所 11321 | 代理人: | 刘挽澜 |
地址: | 518054 广东省深圳市南山区粤海街道沙*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 眼睛 视线 检测 方法 装置 设备 存储 介质 | ||
1.一种眼睛视线的检测方法,其特征在于,所述眼睛视线的检测方法包括:
获取待检测的目标图像,所述待检测的目标图像包括目标眼睛;
采用深度学习模型对所述待检测的目标图像进行特征提取,得到多个边缘特征标记点,并基于所述多个特征标记点判断所述目标眼睛是否为张眼状态,所述多个边缘特征标记点位于所述目标眼睛边缘,所述多个边缘特征标记点至少包括第一参考特征标记点和第二参考特征标记点,所述第一参考特征标记点和所述第二参考特征标记点为直线对称关系;
若所述目标眼睛为张眼状态,则基于所述待检测的目标图像、所述多个边缘特征标记点和预置处理算法得到目标掩码图像,所述目标掩码图像为二值图像;
对所述目标掩码图像进行预处理,得到预处理后的目标图像;
根据所述预处理后的目标图像,得到目标眼睛视线,所述目标眼睛视线为第一目标眼睛视线、第二目标眼睛视线或者第三目标眼睛视线。
2.根据权利要求1所述的眼睛视线的检测方法,其特征在于,所述采用深度学习模型对所述待检测的目标图像进行特征提取,得到多个边缘特征标记点,并基于所述多个特征标记点判断所述目标眼睛是否为张眼状态,所述多个边缘特征标记点位于所述目标眼睛边缘,所述多个边缘特征标记点至少包括第一参考特征标记点和第二参考特征标记点,所述第一参考特征标记点和所述第二参考特征标记点为直线对称关系包括:
将所述待检测的目标图像输入深度学习模型,得到多个边缘特征标记点,所述多个边缘特征标记点至少包括第一参考特征标记点和第二参考特征标记点,所述第一参考特征标记点和所述第二参考特征标记点为直线对称关系;
读取所述多个边缘特征标记点对应的坐标,得到多个边缘特征标记点坐标;
基于最小二乘法对所述多个边缘特征标记点坐标进行计算,得到眼睛闭合比率;
判断所述目标眼睛闭合比率是否大于或者等于标准眼睛闭合比率;
若所述目标眼睛闭合比率大于或者等于所述标准眼睛闭合比率,则确定所述目标眼睛为张眼状态。
3.根据权利要求1所述的眼睛视线的检测方法,其特征在于,所述若所述目标眼睛为张眼状态,则基于所述待检测的目标图像、所述多个边缘特征标记点和预置处理算法得到目标掩码图像,所述目标掩码图像为二值图像包括:
若所述目标眼睛为张眼状态,则采用预置处理算法依次将多个边缘特征标记点进行连接,得到初始掩码图像,所述初始掩码图像包括目标多边形区域和其他区域,所述目标多边形区域像素值为最大值,所述其他区域像素值为最小值,所述其他区域为所述初始掩码图像中除所述目标多边形区域之外的区域;
对所述初始掩码图像进行高斯滤波,得到目标掩码图像。
4.根据权利要求1-3中任一项所述的眼睛视线的检测方法,其特征在于,所述对所述目标掩码图像进行预处理,得到预处理后的目标图像包括:
对所述目标掩码图像的每个通道进行直方图均衡化处理,得到灰度化图像;
采用大津算法对所述灰度化图像进行阈值分割处理,得到初始二值图像;
对所述初始二值图像进行灰度值取反处理,得到目标二值图像;
对所述目标二值图像和目标掩码图像进行逻辑与处理,得到取与后的目标二值图像;
采用预置结构元素对所述取与后的目标二值图像中的目标多边形区域进行膨胀形态学处理,得到预处理后的目标图像。
5.根据权利要求1所述的眼睛视线的检测方法,其特征在于,所述根据所述预处理后的目标图像,检测目标眼睛视线,所述目标眼睛视线为第一目标眼睛视线、第二目标眼睛视线或者第三目标眼睛视线包括:
从所述预处理后的目标图像中,计算得出目标眼睛视线值;
根据所述目标眼睛视线值,得到目标眼睛视线,所述目标眼睛视线为第一目标眼睛视线、第二目标眼睛视线或者第三目标眼睛视线。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市瑞立视多媒体科技有限公司,未经深圳市瑞立视多媒体科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010301951.8/1.html,转载请声明来源钻瓜专利网。