[发明专利]专注度的检测方法、计算机存储介质和计算机设备有效
申请号: | 201910064286.2 | 申请日: | 2019-01-23 |
公开(公告)号: | CN109840486B | 公开(公告)日: | 2023-07-21 |
发明(设计)人: | 冯伟;熊新红;张艳辉;冯亚春;吴新宇;梁国远;张晨宁 | 申请(专利权)人: | 深圳市中科晟达互联智能科技有限公司 |
主分类号: | G06V40/16 | 分类号: | G06V40/16;G06V20/52;G06Q50/20 |
代理公司: | 深圳市铭粤知识产权代理有限公司 44304 | 代理人: | 孙伟峰 |
地址: | 518000 广东省深圳市南山区前海深港合*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 专注 检测 方法 计算机 存储 介质 设备 | ||
1.一种专注度的检测方法,其特征在于,所述检测方法包括:
获取由第一拍摄装置和第二拍摄装置分别从不同角度拍摄的包含目标对象的第一图像和第二图像,并获取与目标对象相对的观测区域的位置;
根据所述第一图像获取第一人脸特征点像素坐标集,且根据所述第二图像获取第二人脸特征点像素坐标集,包括:从所述第一图像中获取仅包含所述目标对象的第一人脸图像块,且从所述第二图像中获取仅包含所述目标对象的第二人脸图像块;利用已训练好的人脸检测模型从第一人脸图像块中获取多个第一人脸特征点的像素坐标,以构成第一人脸特征点像素坐标集,且利用已训练好的人脸检测模型从第二人脸图像块中获取多个第二人脸特征点的像素坐标,以构成第二人脸特征点像素坐标集;
根据所述第一人脸特征点像素坐标集和所述第二人脸特征点像素坐标集获取人脸朝向向量,包括:根据所述第一人脸特征点像素坐标集以及所述第二人脸特征点像素坐标集并利用双目标定参数计算出在拍摄装置坐标系下的人脸特征点拍摄装置坐标集;根据人脸特征点拍摄装置坐标集计算出在摄像装置坐标系下的人脸朝向向量;
根据所述人脸朝向向量和所述观测区域的位置确定所述目标对象的专注度;
所述双目标定参数第一内参矩阵M1、第二内参矩阵M2、旋转矩阵R和平移矩阵T,所述人脸特征点拍摄装置坐标集包括在第一拍摄装置坐标系下的第一人脸特征点拍摄装置坐标集和在第二拍摄装置坐标系下的第二人脸特征点拍摄装置坐标集其中,表示人脸特征点在第一拍摄装置坐标系下的空间坐标,表示人脸特征点在第二拍摄装置坐标系下的空间坐标;
在第一拍摄装置坐标系下和第二拍摄装置坐标系下,同一人脸特征点对应的坐标关系如下:
其中,和分别是和的齐次形式,展开式子(1)可得到
根据针孔成像模型,同一人脸特征点在第一拍摄装置坐标系下和第二拍摄装置坐标系下的投影模型满足如下关系:
其中,和分别是m1和m2的齐次形式,且m1为从第一人脸特征点像素坐标集中选取,m2为从第二人脸特征点像素坐标集中选取,根据式子(3)可得到:
根据式子(4)和式子(2)可得到如下方程组:
通过最小二乘法,求解上述的方程组(5),可得到z1和z2,根据得到的z1和z2以及式子(4)即可得到人脸特征点在第一拍摄装置坐标系下的三维坐标在第二拍摄装置坐标系下的三维坐标
2.根据权利要求1所述的专注度的检测方法,其特征在于,根据所述人脸朝向向量和所述观测区域的位置确定所述目标对象的专注度的方法包括:
根据所述观测区域的位置获取在摄像装置坐标系下的观测区域的位置坐标;
根据所述人脸朝向向量和所述观测区域的位置坐标确定所述目标对象的人脸朝向方向是否穿过所述观测区域,从而确定目标对象的专注度。
3.根据权利要求1所述的专注度的检测方法,其特征在于,所述检测方法还包括:
获取所述第一人脸图像块的第一中心像素的像素坐标,且获取所述第二人脸图像块的第二中心像素的像素坐标;
根据所述第一中心像素的像素坐标、第二中心像素的像素坐标以及双目标定参数计算出目标对象在摄像装置坐标系下的位置坐标。
4.根据权利要求3所述的专注度的检测方法,其特征在于,所述检测方法还包括:对所述目标对象的位置坐标、所述人脸朝向向量、所述专注度的检测结果以及相应的时间信息进行存储。
5.根据权利要求1所述的专注度的检测方法,其特征在于,所述观测区域位于所述第一拍摄装置和所述第二拍摄装置之间。
6.一种计算机存储介质,其特征在于,所述计算机存储介质存储有专注度的检测程序,所述专注度的检测程序被处理器执行时实现如权利要求1至5任一项所述的专注度的检测方法。
7.一种计算机设备,其特征在于,包括存储器、处理器以及存储在所述存储器上的专注度的检测程序,所述专注度的检测程序被所述处理器执行时实现如权利要求1至5任一项所述的专注度的检测方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市中科晟达互联智能科技有限公司,未经深圳市中科晟达互联智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910064286.2/1.html,转载请声明来源钻瓜专利网。