[发明专利]基于头部姿态偏差校正的伪造换脸增强检测方法在审
申请号: | 202111233086.9 | 申请日: | 2021-10-22 |
公开(公告)号: | CN113947794A | 公开(公告)日: | 2022-01-18 |
发明(设计)人: | 王总辉;虞楚尔;刘非凡;段宇萱;陈文智 | 申请(专利权)人: | 浙江大学 |
主分类号: | G06V40/16 | 分类号: | G06V40/16;G06V40/40;G06V10/774;G06T3/00;G06K9/62 |
代理公司: | 杭州天勤知识产权代理有限公司 33224 | 代理人: | 曹兆霞 |
地址: | 310058 浙江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 头部 姿态 偏差 校正 伪造 增强 检测 方法 | ||
1.一种基于头部姿态偏差校正的伪造换脸增强检测方法,包括以下步骤:
获取正常人脸图像和伪造人脸图像并提取关键点;
针对伪造人脸图像,结合头部三维模型,对关键点进行重投影以得到重投影后关键点,对投影后关键点进行校正,根据提取的初始关键点和校正后关键点,采用基于最小移动二乘算法对伪造人脸图像进行扭曲以实现增强伪造,得到增强伪造人脸图像;
以正常人脸图像和增强伪造人脸图像作为样本,基于样本的关键点进行头部姿势评估,以确定头部姿态的旋转矩阵和平移矩阵,以旋转矩阵和平移矩阵作构建特征来优化伪造换脸检测模型参数;
利用参数优化的伪造换脸检测模型进行伪造换脸的增强检测。
2.根据权利要求1所述的基于头部姿态偏差校正的伪造换脸增强检测方法,其特征在于,提取的所有关键点为全局关键点,按照区域划分为轮廓关键点和中心脸关键点;
所述对关键点进行重投影包括:对轮廓关键点进行重投影、对中心脸关键点进行重投影。
3.根据权利要求1或2所述的基于头部姿态偏差校正的伪造换脸增强检测方法,其特征在于,重投影过程包括:
将人脸图像上的二维关键点通过映射得到对应于头部三维模型上的三维关键点;基于关键点进行头部姿势评估,以确定关键点对应的旋转矩阵和平移矩阵;然后,参考旋转矩阵和平移矩阵,并采用重投影函数对三维关键点进行重投影计算,得到重投影后二维关键点。
4.根据权利要求3所述的基于头部姿态偏差校正的伪造换脸增强检测方法,其特征在于,所述对轮廓关键点进行重投影,包括:参考中心脸参考点对应的旋转矩阵和平移矩阵,并采用重投影函数对轮廓三维关键点进行重投影计算,得到重投影后的轮廓二维关键点;
所述对中心脸关键点进行重投影,包括:参考轮廓参考点对应的旋转矩阵和平移矩阵,并采用重投影函数对中心脸三维关键点进行重投影计算,得到重投影后的中心脸二维关键点。
5.根据权利要求1所述的基于头部姿态偏差校正的伪造换脸增强检测方法,其特征在于,所述对投影后关键点进行校正,包括:
利用重投影前后的所有关键点计算转换矩阵,利用转换矩阵对投影后关键点进行透视变换,以做校正。
6.根据权利要求1所述的基于头部姿态偏差校正的伪造换脸增强检测方法,其特征在于,对伪造人脸图像进行扭曲的过程包括:
基于初始关键点和校正后关键点,采用最小移动二乘算法进行拟合,以求解表征初始关键点与矫正后关键点之间变换关系的变换函数,利用变换函数对伪造人脸图像上的像素点进行变换以进行扭曲。
7.根据权利要求1所述的基于头部姿态偏差校正的伪造换脸增强检测方法,其特征在于,所述基于样本的关键点进行头部姿态评估,包括:
基于计算机视觉理论,通过世界坐标、相机坐标和图片坐标的转化关系,构建并求解以下公式,得到头部姿态的旋转矩阵和平移矩阵;
其中,(xi,yi)是样本的关键点的坐标,i是关键点的索引,n为关键点个数,(Ui,Vi,Wi)是关键点的世界坐标,fx和fy是成像相机在x方向和y方向上的焦距,(cx,cy)是成像相机的光学中心,s是需求解的缩放参数,R为需要求解的旋转矩阵,为需求解的平移矩阵。
8.根据权利要求2所述的基于头部姿态偏差校正的伪造换脸增强检测方法,其特征在于,所述以旋转矩阵和平移矩阵作为特征来优化伪造换脸检测模型参数,包括:
全局关键点和中心脸关键点的旋转矩阵分别表示为Ra和Rc,全局关键点和中心脸关键点的平移矩阵分别表示为和依据公式计算全局关键点和中心脸关键点分别对应的头部三维向量,分别表示为
构建的特征包括:
利用构建的任意一种特征作为伪造换脸检测模型的输入数据,来优化伪造换脸检测模型参数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大学,未经浙江大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111233086.9/1.html,转载请声明来源钻瓜专利网。