[发明专利]一种数据处理方法、装置和用于数据处理的装置在审

专利信息
申请号: 201810590236.3 申请日: 2018-06-08
公开(公告)号: CN110580733A 公开(公告)日: 2019-12-17
发明(设计)人: 郭金马;商磊 申请(专利权)人: 北京搜狗科技发展有限公司;搜狗(杭州)智能科技有限公司
主分类号: G06T15/04 分类号: G06T15/04
代理公司: 11319 北京润泽恒知识产权代理有限公司 代理人: 莎日娜
地址: 100084 北京市海淀区中关*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 纹理图像 人脸 图像 空洞区域 数据处理 替换 三维模型 纹理填充 空洞 渲染
【权利要求书】:

1.一种数据处理方法,其特征在于,用于采用第一图像中人脸替换第二图像中人脸,所述方法包括:

依据所述第一图像中人脸对应的第一三维模型,确定所述第一图像中人脸对应的第一纹理图像、以及所述第一纹理图像中的空洞区域;

对所述第一纹理图像中的空洞区域进行纹理填充,以得到完整纹理图像;

将所述完整纹理图像渲染到所述第二图像中。

2.根据权利要求1所述的方法,其特征在于,所述确定所述第一纹理图像中的空洞区域,包括:

依据所述第一三维模型上多边形面片的法向量,确定所述第一纹理图像中的空洞区域。

3.根据权利要求1所述的方法,其特征在于,所述对所述第一纹理图像中的空洞区域进行纹理填充,包括:

依据空洞区域的周围像素分布,对所述第一纹理图像中的空洞区域进行纹理填充;和/或

依据位置与纹理之间的映射概率,对所述第一纹理图像中的空洞区域进行纹理填充。

4.根据权利要求1或2或3所述的方法,其特征在于,所述将所述完整纹理图像渲染到所述第二图像中,包括:

将所述完整纹理图像放至所述第二图像中人脸对应的第二三维模型上,以得到带有完整纹理图像的目标三维模型;

依据所述第二图像中人脸的姿态参数,确定所述目标三维模型对应的二维投影图像;

将所述二维投影图像融合到所述第二图像中。

5.根据权利要求1或2或3所述的方法,其特征在于,所述将所述完整纹理图像渲染到所述第二图像中,包括:

将所述完整纹理图像渲染到所述第二图像中,以及,将预置表情渲染到所述第二图像中。

6.根据权利要求5所述的方法,其特征在于,所述预置表情包括如下表情中的任一:

所述第一图像中人脸对应的表情;

所述第二图像中人脸对应的表情;以及

用户设定的第三表情。

7.根据权利要求1或2或3所述的方法,其特征在于,通过如下步骤确定所述第一图像中人脸对应的第一三维模型:

确定所述第一图像中人脸对应的第一二维特征点;

将预设三维模型中的三维特征点投影到二维空间后得到第二二维特征点,并与与所述第一二维特征点进行拟合,将拟合后的的预设三维模型作为所述第一图像中人脸对应的第一三维模型。

8.一种数据处理装置,其特征在于,用于采用第一图像中人脸替换第二图像中人脸,所述装置包括:

纹理空洞确定模块,用于依据所述第一图像中人脸对应的第一三维模型,确定所述第一图像中人脸对应的第一纹理图像、以及所述第一纹理图像中的空洞区域;

纹理填充模块,用于对所述第一纹理图像中的空洞区域进行纹理填充,以得到完整纹理图像;以及

渲染模块,用于将所述完整纹理图像渲染到所述第二图像中。

9.一种用于数据处理的装置,其特征在于,用于采用第一图像中人脸替换第二图像中人脸,所述装置包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行以下操作的指令:

依据所述第一图像中人脸对应的第一三维模型,确定所述第一图像中人脸对应的第一纹理图像、以及所述第一纹理图像中的空洞区域;

对所述第一纹理图像中的空洞区域进行纹理填充,以得到完整纹理图像;

将所述完整纹理图像渲染到所述第二图像中。

10.一种机器可读介质,其上存储有指令,当由一个或多个处理器执行时,使得装置执行如权利要求1至7中一个或多个所述的数据处理方法。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京搜狗科技发展有限公司;搜狗(杭州)智能科技有限公司,未经北京搜狗科技发展有限公司;搜狗(杭州)智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201810590236.3/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top