[发明专利]一种数据处理方法、装置和用于数据处理的装置在审
申请号: | 201810590236.3 | 申请日: | 2018-06-08 |
公开(公告)号: | CN110580733A | 公开(公告)日: | 2019-12-17 |
发明(设计)人: | 郭金马;商磊 | 申请(专利权)人: | 北京搜狗科技发展有限公司;搜狗(杭州)智能科技有限公司 |
主分类号: | G06T15/04 | 分类号: | G06T15/04 |
代理公司: | 11319 北京润泽恒知识产权代理有限公司 | 代理人: | 莎日娜 |
地址: | 100084 北京市海淀区中关*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 纹理图像 人脸 图像 空洞区域 数据处理 替换 三维模型 纹理填充 空洞 渲染 | ||
1.一种数据处理方法,其特征在于,用于采用第一图像中人脸替换第二图像中人脸,所述方法包括:
依据所述第一图像中人脸对应的第一三维模型,确定所述第一图像中人脸对应的第一纹理图像、以及所述第一纹理图像中的空洞区域;
对所述第一纹理图像中的空洞区域进行纹理填充,以得到完整纹理图像;
将所述完整纹理图像渲染到所述第二图像中。
2.根据权利要求1所述的方法,其特征在于,所述确定所述第一纹理图像中的空洞区域,包括:
依据所述第一三维模型上多边形面片的法向量,确定所述第一纹理图像中的空洞区域。
3.根据权利要求1所述的方法,其特征在于,所述对所述第一纹理图像中的空洞区域进行纹理填充,包括:
依据空洞区域的周围像素分布,对所述第一纹理图像中的空洞区域进行纹理填充;和/或
依据位置与纹理之间的映射概率,对所述第一纹理图像中的空洞区域进行纹理填充。
4.根据权利要求1或2或3所述的方法,其特征在于,所述将所述完整纹理图像渲染到所述第二图像中,包括:
将所述完整纹理图像放至所述第二图像中人脸对应的第二三维模型上,以得到带有完整纹理图像的目标三维模型;
依据所述第二图像中人脸的姿态参数,确定所述目标三维模型对应的二维投影图像;
将所述二维投影图像融合到所述第二图像中。
5.根据权利要求1或2或3所述的方法,其特征在于,所述将所述完整纹理图像渲染到所述第二图像中,包括:
将所述完整纹理图像渲染到所述第二图像中,以及,将预置表情渲染到所述第二图像中。
6.根据权利要求5所述的方法,其特征在于,所述预置表情包括如下表情中的任一:
所述第一图像中人脸对应的表情;
所述第二图像中人脸对应的表情;以及
用户设定的第三表情。
7.根据权利要求1或2或3所述的方法,其特征在于,通过如下步骤确定所述第一图像中人脸对应的第一三维模型:
确定所述第一图像中人脸对应的第一二维特征点;
将预设三维模型中的三维特征点投影到二维空间后得到第二二维特征点,并与与所述第一二维特征点进行拟合,将拟合后的的预设三维模型作为所述第一图像中人脸对应的第一三维模型。
8.一种数据处理装置,其特征在于,用于采用第一图像中人脸替换第二图像中人脸,所述装置包括:
纹理空洞确定模块,用于依据所述第一图像中人脸对应的第一三维模型,确定所述第一图像中人脸对应的第一纹理图像、以及所述第一纹理图像中的空洞区域;
纹理填充模块,用于对所述第一纹理图像中的空洞区域进行纹理填充,以得到完整纹理图像;以及
渲染模块,用于将所述完整纹理图像渲染到所述第二图像中。
9.一种用于数据处理的装置,其特征在于,用于采用第一图像中人脸替换第二图像中人脸,所述装置包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行以下操作的指令:
依据所述第一图像中人脸对应的第一三维模型,确定所述第一图像中人脸对应的第一纹理图像、以及所述第一纹理图像中的空洞区域;
对所述第一纹理图像中的空洞区域进行纹理填充,以得到完整纹理图像;
将所述完整纹理图像渲染到所述第二图像中。
10.一种机器可读介质,其上存储有指令,当由一个或多个处理器执行时,使得装置执行如权利要求1至7中一个或多个所述的数据处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京搜狗科技发展有限公司;搜狗(杭州)智能科技有限公司,未经北京搜狗科技发展有限公司;搜狗(杭州)智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810590236.3/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序