[发明专利]一种图像处理方法、装置、终端及存储介质在审
申请号: | 201910408168.9 | 申请日: | 2019-05-15 |
公开(公告)号: | CN110288632A | 公开(公告)日: | 2019-09-27 |
发明(设计)人: | 高鹏远 | 申请(专利权)人: | 北京旷视科技有限公司 |
主分类号: | G06T7/246 | 分类号: | G06T7/246 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 莎日娜 |
地址: | 100190 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 人脸 局部图像 多个目标 视频帧 人脸位置信息 关键点信息 集合 存储介质 图像处理 终端 追踪 计算资源 人脸检测 人脸识别 人脸特征 人脸追踪 视频流 预设 筛选 | ||
1.一种图像处理方法,其特征在于,所述方法包括:
对视频流中的多个待处理视频帧进行人脸检测,以获得所述多个待处理视频帧中的人脸位置信息;
根据所述人脸位置信息,利用交并比追踪策略,确定所述多个待处理视频帧中多个人脸所分别对应的人脸局部图像集合,所述人脸局部图像集合中包括所述多个待处理视频帧中同一人脸对应的一个或者多个局部图像;
利用预设的筛选策略,确定所述人脸局部图像集合中的一个或者多个目标人脸局部图像;
根据所述一个或者多个目标人脸局部图像,确定所述一个或者多个目标人脸局部图像中的各个人脸所对应的人脸关键点信息;
根据所述人脸关键点信息,确定人脸特征集合,所述人脸特征集合中包括所述一个或者多个目标人脸局部图像中的各个人脸所对应的特征信息和/或属性信息。
2.根据权利要求1所述的方法,其特征在于,所述根据所述人脸位置信息,利用交并比追踪策略,确定所述多个待处理视频帧中多个人脸所分别对应的人脸局部图像集合,包括:
根据所述人脸位置信息,通过预测和滤波处理,分别确定所述多个待处理视频帧中多个人脸对应的预测位置信息,所述预测位置信息包括根据所述人脸位置信息所预测出的所述多个人脸在下一帧分别对应的位置信息;
根据所述预测位置信息和所述人脸位置信息,对所述多个待处理视频帧中的多个人脸进行交并比追踪,以确定所述多个待处理视频帧中的多个人脸对应的人脸框集合;
根据所述人脸框集合,确定所述人脸局部图像集合。
3.根据权利要求2所述的方法,其特征在于,所述根据所述多个人脸在下一帧中的预测位置信息和所述人脸位置信息,对所述多个待处理视频帧中的多个人脸进行交并比追踪,以确定所述多个待处理视频帧中的多个人脸对应的人脸框集合,包括:
根据第一预测位置信息,确定第一视频帧中的第一预测人脸框,所述第一预测位置信息是基于第一人脸位置信息所预测出的在所述第一视频帧中第一人脸对应的位置信息,所述第一人脸位置信息是所述第一人脸在所述第一视频帧的上一帧中的位置信息;
根据所述人脸位置信息中所述第一视频帧中各个人脸所对应的位置信息,获取所述第一视频帧中的一个或者多个待确定人脸框;
确定所述一个或者多个待确定人脸框与所述第一预测人脸框之间的交并比值;
将所述交并比值大于预设阈值的待确定人脸框作为第一人脸框集合中的人脸框;
其中,所述第一视频帧是所述多个待处理视频帧中的任一视频帧,所述第一人脸框集合是所述第一视频帧的上一视频帧中所述第一人脸所在的人脸框集合。
4.根据权利要求1或2所述的方法,其特征在于,所述筛选策略包括用于计算质量分值的打分策略和用于计算置信度的计算策略,所述利用预设的筛选策略,确定所述人脸局部图像集合中的一个或者多个目标人脸局部图像,包括:
根据所述打分策略,确定每个所述人脸局部图像集合中的各个局部图像的质量分值,所述打分策略是基于所述各个局部图像的姿态信息和清晰度信息确定所述各个局部图像的质量分值的策略;
将所述质量分值大于预设分值阈值的局部图像,作为待筛选局部图像;
根据第一筛选条件,确定与目标图像集合对应的目标图像,所述目标图像包括满足所述第一筛选条件的一个或者多个待筛选局部图像,所述目标图像集合包括与所述待筛选局部图像对应的一个或者多个人脸局部图像集合;
根据所述计算策略,确定所述目标图像的置信度;
将所述置信度大于预设置信度阈值的一个或者多个目标图像,作为所述目标人脸局部图像。
5.根据权利要求4所述的方法,其特征在于,所述根据所述计算策略,确定所述目标图像的置信度,包括:
在不满足预设的批次处理条件的情况下,缓存已获取到的所述目标图像;
在满足所述批次处理条件的情况下,分别计算所述目标图像中所包括的局部图像的置信度。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京旷视科技有限公司,未经北京旷视科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910408168.9/1.html,转载请声明来源钻瓜专利网。