[发明专利]一种图像特效处理方法、装置及终端在审

专利信息
申请号: 201911300750.X 申请日: 2019-12-17
公开(公告)号: CN111047509A 公开(公告)日: 2020-04-21
发明(设计)人: 王磊;雷泽童;郭怡宏;康宇航;程俊 申请(专利权)人: 中国科学院深圳先进技术研究院
主分类号: G06T3/00 分类号: G06T3/00;G06T7/10
代理公司: 深圳中一联合知识产权代理有限公司 44414 代理人: 符亚飞
地址: 518000 广东省深圳*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 图像 特效 处理 方法 装置 终端
【说明书】:

本申请适用于图像处理技术领域,提供一种图像特效处理方法、装置及终端,其中方法包括:获取待处理的人脸图像,及与脸部特效图像对应的第一人脸语义分割掩膜;将所述待处理的人脸图像及所述第一人脸语义分割掩膜输入至密集映射网络,生成初步人脸图像;基于所述初步人脸图像,及所述脸部特效图像,通过循环式生成对抗网络,生成目标人脸图像,提高了效率,降低了成本,使大规模快速实现科幻电影特效成为可能。

技术领域

本申请属于图像处理技术领域,尤其涉及一种图像特效处理方法、装置及终端。

背景技术

当前科幻电影的制作需要使用特效实现人物的科幻形象,如《阿凡达》内的纳美人和《复仇者联盟》中的绿巨人。这些人物在现实中不存在,需要通过特殊手段创造出来,一般需要运用计算机生成视觉图像(computer graphics,CG),创造特定的人物模型,然后由设计师为最终效果着色,渲染。《阿凡达》中一个来自潘多拉星球的人物就由上百万个CG图形组成。此外,基于动作捕捉或表情捕捉的技术,需要演员穿上一种布满位置跟踪标记点的跟踪服,且后期的制作需要大量的人力和时间用于重复的工作。

这使得类似于科幻题材的影片制作难度高,人脸科幻转换的效果不佳,且处理效率极低,成本极高,无法大规模快速实现科幻电影特效的制作。

发明内容

本申请实施例提供了一种图像特效处理方法、装置及终端,以解决现有技术中特效影片图像的制作难度高,人脸科幻转换的效果不佳,且处理效率极低,成本极高,无法大规模快速实现科幻电影特效的制作的问题。

本申请实施例的第一方面提供了一种图像特效处理方法,包括:

获取待处理的人脸图像,及与脸部特效图像对应的第一人脸语义分割掩膜;所述待处理的人脸图像与所述脸部特效图像中的脸部特征不同;

将所述待处理的人脸图像及所述第一人脸语义分割掩膜输入至密集映射网络,生成初步人脸图像;所述初步人脸图像为将所述待处理的人脸图像中人脸依照所述脸部特效图像中的脸部特效进行形变后的图像;

基于所述初步人脸图像,及所述脸部特效图像,通过循环式生成对抗网络,生成目标人脸图像;所述目标人脸图像为将所述初步人脸图像依照所述脸部特效图像进行特效渲染后的图像。

本申请实施例的第二方面提供了一种图像特效处理装置,包括:

第一获取模块,用于获取待处理的人脸图像,及与脸部特效图像对应的第一人脸语义分割掩膜;所述待处理的人脸图像与所述脸部特效图像中的脸部特征不同;

第一生成模块,用于将所述待处理的人脸图像及所述第一人脸语义分割掩膜输入至密集映射网络,生成初步人脸图像;所述初步人脸图像为将所述待处理的人脸图像中人脸依照所述脸部特效图像中的脸部特效进行形变后的图像;

第二生成模块,用于基于所述初步人脸图像,及所述脸部特效图像,通过循环式生成对抗网络,生成目标人脸图像;所述目标人脸图像为将所述初步人脸图像依照所述脸部特效图像进行特效渲染后的图像。

本申请实施例的第三方面提供了一种终端,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如第一方面所述方法的步骤。

本申请实施例的第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如第一方面所述方法的步骤。

本申请的第五方面提供了一种计算机程序产品,当所述计算机程序产品在终端上运行时,使得所述终端执行上述第一方面所述方法的步骤。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院深圳先进技术研究院,未经中国科学院深圳先进技术研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201911300750.X/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top