[发明专利]模型训练方法、图像处理方法、装置、电子设备及介质在审
申请号: | 202111175983.9 | 申请日: | 2021-10-09 |
公开(公告)号: | CN113850716A | 公开(公告)日: | 2021-12-28 |
发明(设计)人: | 张朋;周思宇 | 申请(专利权)人: | 北京字跳网络技术有限公司 |
主分类号: | G06T3/00 | 分类号: | G06T3/00;G06N20/00 |
代理公司: | 北京远智汇知识产权代理有限公司 11659 | 代理人: | 范坤坤 |
地址: | 100190 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 模型 训练 方法 图像 处理 装置 电子设备 介质 | ||
1.一种模型训练方法,其特征在于,包括:
根据源类型的第一图像和目标类型的第二图像训练转换模型,以基于训练完毕的转换模型,将所述第一图像转换为所述目标类型的第三图像;
根据所述第一图像包含的对象,对所述第三图像中相应的对象进行调整,得到调整图像;
根据所述第一图像和所述调整图像对特效模型进行训练。
2.根据权利要求1所述的方法,其特征在于,所述根据源类型的第一图像和目标类型的第二图像训练转换模型,包括:
根据源类型的第一图像训练生成模型;
根据所述第一图像和训练完毕的生成模型训练编码器;
根据训练完毕的编码器、所述第一图像和目标类型的第二图像训练转换模型;
其中,所述转换模型的初始参数基于训练完毕的生成模型的参数配置。
3.根据权利要求2所述的方法,其特征在于,所述根据源类型的第一图像训练生成模型,包括:
将白噪声图像输入生成模型,将所述生成模型的输出图像和源类型的第一图像输入第一判别器;
根据所述第一判别器的判别结果,对所述生成模型进行训练。
4.根据权利要求2所述的方法,其特征在于,所述根据所述第一图像和训练完毕的生成模型训练编码器,包括:
将所述第一图像依次经编码器和训练完毕的生成模型进行处理,得到所述生成模型的输出图像;
根据所述生成模型的输出图像和所述第一图像,对所述编码器进行训练。
5.根据权利要求2所述的方法,其特征在于,所述根据训练完毕的编码器、所述第一图像和目标类型的第二图像训练转换模型,包括:
将所述第一图像依次经训练完毕的编码器和转换模型进行处理,得到所述转换模型的输出图像;
将所述转换模型的输出图像和所述目标类型的第二图像输入第二判别器;
根据所述第二判别器的判别结果,对所述转换模型进行训练。
6.根据权利要求2所述的方法,其特征在于,所述根据训练完毕的编码器、所述第一图像和目标类型的第二图像训练转换模型,还包括:
将目标类型的第二图像进行扩充;
根据训练完毕的编码器、所述第一图像和扩充后的第二图像训练转换模型。
7.根据权利要求1所述的方法,其特征在于,所述根据所述第一图像包含的对象,对所述第三图像中相应的对象进行调整,包括下述至少一项:
根据所述第一图像包含的脸部关键点,对所述第三图像中相应的脸部关键点进行调整;
将所述第一图像包含的头发区域的图像,叠加至所述第三图像中头发区域。
8.根据权利要求1所述的方法,其特征在于,还包括:
对目标类型的第二图像进行筛选;
相应的,根据源类型的第一图像和目标类型的第二图像训练转换模型,包括:根据源类型的第一图像和筛选后的第二图像训练转换模型。
9.根据权利要求8所述的方法,其特征在于,所述对目标类型的第二图像进行筛选,包括:
检测目标类型的第二图像中的脸部关键点和头发区域;
根据所述脸部关键点确定额头区域,并确定所述额头区域与头发区域的重叠区域;
根据所述重叠区域占所述额头区域的占比,对所述第二图像进行筛选。
10.一种图像处理方法,其特征在于,包括:
将源类型的待转化图像输入特效模型;
通过所述特效模型输出目标类型的目标图像;
其中,所述特效模型基于权利要求1-9中任一所述的模型训练方法训练得到。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字跳网络技术有限公司,未经北京字跳网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111175983.9/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序