[发明专利]视线识别模型的训练方法、视线识别方法、装置及设备在审
申请号: | 202110015600.5 | 申请日: | 2021-01-06 |
公开(公告)号: | CN112766097A | 公开(公告)日: | 2021-05-07 |
发明(设计)人: | 朱冬晨;林敏静;李航;李嘉茂;张晓林 | 申请(专利权)人: | 中国科学院上海微系统与信息技术研究所 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 郝传鑫;贾允 |
地址: | 200050 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视线 识别 模型 训练 方法 装置 设备 | ||
1.一种视线识别模型的训练方法,其特征在于,包括:
获取样本图像集;所述样本图像集包括样本图像;所述样本图像包括第一区域和第二区域;
将所述样本图像输入预设机器学习模型,进行视线识别处理,得到所述第一区域对应的第一视线信息以及所述第二区域对应的第二视线信息;
基于所述第一视线信息,确定所述第二区域对应的第三视线信息;
基于所述第二视线信息和所述第三视线信息,确定第一损失信息;
根据所述第一损失信息,确定损失信息;
基于所述损失信息调整所述预设机器学习模型中的模型参数,至所述损失信息满足预设条件,将满足预设条件时的预设机器学习模型作为所述视线识别模型。
2.根据权利要求1所述的方法,其特征在于,所述基于所述第一视线信息,确定所述第二区域对应的第三视线信息,包括:
基于预设坐标系,确定所述第一区域对应的第一中心向量、所述第二区域对应的第二中心向量以及所述第一视线信息对应的第一向量;
根据所述第一中心向量、所述第二中心向量和所述第一向量,确定所述第三视线信息。
3.根据权利要求1所述的方法,其特征在于,所述基于所述第二视线信息和所述第三视线信息确定第一损失信息之后,还包括:
获取所述样本图像对应的视线标签信息;所述视线标签信息包括所述第一区域对应的视线标签信息和所述第二区域对应的视线标签信息;
根据所述视线标签信息、所述第一视线信息和所述第二视线信息,确定第二损失信息;
所述根据所述第一损失信息,确定损失信息,包括:
根据所述第一损失信息和所述第二损失信息,确定损失信息。
4.根据权利要求2所述的方法,其特征在于,所述基于所述第二视线信息和所述第三视线信息,确定第一损失信息,包括:
基于所述预设坐标系,确定所述第二视线信息和所述第三视线信息对应的距离信息;
根据所述距离信息,确定所述第一损失信息。
5.根据权利要求2所述的方法,其特征在于,所述得到所述第一区域对应的第一视线信息以及所述第二区域对应的第二视线信息之后,还包括:
根据所述第一视线信息和所述第二视线信息,确定所述第一损失信息,包括:
基于所述预设坐标系,确定所述第一视线信息对应的第一坐标信息、所述第二视线信息对应的第二坐标信息,以及确定所述第一区域对应的第一标准化向量和所述第二区域对应的第二标准化向量;
基于预设转换规则,确定所述第一坐标信息对应的第一角度向量以及所述第二坐标信息对应的第二角度向量;
根据所述第一标准化向量、所述第二标准化向量、所述第一角度向量和所述第二角度向量,确定所述第一损失信息。
6.一种视线识别方法,其特征在于,包括:
获取待处理图像;所述待处理图像包括第一待识别区域和第二待识别区域;
将所述待处理图像作为视线识别模型的输入,进行视线识别处理,得到所述第一待识别区域对应的第一目标视线信息和所述第二待识别区域对应的第二目标视线信息;其中,所述视线识别模型为权利要求1-5任一项所述的视线识别模型。
7.一种视线识别模型的训练装置,其特征在于,包括:
样本图像集获取模块,用于获取样本图像集;所述样本图像集包括样本图像;所述样本图像包括第一区域和第二区域;
识别处理模块,用于将所述样本图像输入预设机器学习模型,进行视线识别处理,得到所述第一区域对应的第一视线信息以及所述第二区域对应的第二视线信息;
第三视线信息确定模块,用于基于所述第一视线信息,确定所述第二区域对应的第三视线信息;
第一损失信息确定模块,用于基于所述第二视线信息和所述第三视线信息确定第一损失信息;
损失信息确定模块,用于根据所述第一损失信息,确定损失信息;
视线识别模型确定模块,用于基于所述损失信息调整所述预设机器学习模型中的模型参数,至所述损失信息满足预设条件,将满足预设条件时的预设机器学习模型作为所述视线识别模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院上海微系统与信息技术研究所,未经中国科学院上海微系统与信息技术研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110015600.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:防爆LED工作灯
- 下一篇:一种RabbitMQ集群的迁移方法及计算机系统