[发明专利]一种图像特效处理方法、装置及终端在审
申请号: | 201911300750.X | 申请日: | 2019-12-17 |
公开(公告)号: | CN111047509A | 公开(公告)日: | 2020-04-21 |
发明(设计)人: | 王磊;雷泽童;郭怡宏;康宇航;程俊 | 申请(专利权)人: | 中国科学院深圳先进技术研究院 |
主分类号: | G06T3/00 | 分类号: | G06T3/00;G06T7/10 |
代理公司: | 深圳中一联合知识产权代理有限公司 44414 | 代理人: | 符亚飞 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 图像 特效 处理 方法 装置 终端 | ||
本申请适用于图像处理技术领域,提供一种图像特效处理方法、装置及终端,其中方法包括:获取待处理的人脸图像,及与脸部特效图像对应的第一人脸语义分割掩膜;将所述待处理的人脸图像及所述第一人脸语义分割掩膜输入至密集映射网络,生成初步人脸图像;基于所述初步人脸图像,及所述脸部特效图像,通过循环式生成对抗网络,生成目标人脸图像,提高了效率,降低了成本,使大规模快速实现科幻电影特效成为可能。
技术领域
本申请属于图像处理技术领域,尤其涉及一种图像特效处理方法、装置及终端。
背景技术
当前科幻电影的制作需要使用特效实现人物的科幻形象,如《阿凡达》内的纳美人和《复仇者联盟》中的绿巨人。这些人物在现实中不存在,需要通过特殊手段创造出来,一般需要运用计算机生成视觉图像(computer graphics,CG),创造特定的人物模型,然后由设计师为最终效果着色,渲染。《阿凡达》中一个来自潘多拉星球的人物就由上百万个CG图形组成。此外,基于动作捕捉或表情捕捉的技术,需要演员穿上一种布满位置跟踪标记点的跟踪服,且后期的制作需要大量的人力和时间用于重复的工作。
这使得类似于科幻题材的影片制作难度高,人脸科幻转换的效果不佳,且处理效率极低,成本极高,无法大规模快速实现科幻电影特效的制作。
发明内容
本申请实施例提供了一种图像特效处理方法、装置及终端,以解决现有技术中特效影片图像的制作难度高,人脸科幻转换的效果不佳,且处理效率极低,成本极高,无法大规模快速实现科幻电影特效的制作的问题。
本申请实施例的第一方面提供了一种图像特效处理方法,包括:
获取待处理的人脸图像,及与脸部特效图像对应的第一人脸语义分割掩膜;所述待处理的人脸图像与所述脸部特效图像中的脸部特征不同;
将所述待处理的人脸图像及所述第一人脸语义分割掩膜输入至密集映射网络,生成初步人脸图像;所述初步人脸图像为将所述待处理的人脸图像中人脸依照所述脸部特效图像中的脸部特效进行形变后的图像;
基于所述初步人脸图像,及所述脸部特效图像,通过循环式生成对抗网络,生成目标人脸图像;所述目标人脸图像为将所述初步人脸图像依照所述脸部特效图像进行特效渲染后的图像。
本申请实施例的第二方面提供了一种图像特效处理装置,包括:
第一获取模块,用于获取待处理的人脸图像,及与脸部特效图像对应的第一人脸语义分割掩膜;所述待处理的人脸图像与所述脸部特效图像中的脸部特征不同;
第一生成模块,用于将所述待处理的人脸图像及所述第一人脸语义分割掩膜输入至密集映射网络,生成初步人脸图像;所述初步人脸图像为将所述待处理的人脸图像中人脸依照所述脸部特效图像中的脸部特效进行形变后的图像;
第二生成模块,用于基于所述初步人脸图像,及所述脸部特效图像,通过循环式生成对抗网络,生成目标人脸图像;所述目标人脸图像为将所述初步人脸图像依照所述脸部特效图像进行特效渲染后的图像。
本申请实施例的第三方面提供了一种终端,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如第一方面所述方法的步骤。
本申请实施例的第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如第一方面所述方法的步骤。
本申请的第五方面提供了一种计算机程序产品,当所述计算机程序产品在终端上运行时,使得所述终端执行上述第一方面所述方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院深圳先进技术研究院,未经中国科学院深圳先进技术研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911300750.X/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种ID发现方法和装置
- 下一篇:一种背负式喷雾器
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序