[发明专利]图像处理模型的训练方法、装置、计算机设备和存储介质有效
申请号: | 202010156852.5 | 申请日: | 2020-03-09 |
公开(公告)号: | CN111353546B | 公开(公告)日: | 2022-12-23 |
发明(设计)人: | 朱俊伟;倪辉;邰颖;曹赟;陈旭;葛彦昊;汪铖杰;李季檩 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06V10/74 | 分类号: | G06V10/74;G06V10/774;G06V10/764;G06V40/16;G06T3/00 |
代理公司: | 华进联合专利商标代理有限公司 44224 | 代理人: | 黄晶晶 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 图像 处理 模型 训练 方法 装置 计算机 设备 存储 介质 | ||
本申请涉及一种图像处理模型的训练方法、装置、计算机设备和存储介质。方法包括:获取三元组样本,三元组样本包括源图像、第一图像和目标图像;源图像和目标图像对应相同的身份属性,第一图像和源图像对应不同的身份属性;第一图像和目标图像对应相同的非身份属性;将源图像和第一图像输入图像处理模型中的生成器,得到输出图像;将源图像、第一图像、目标图像和输出图像输入图像处理模型中的判别器,得到图像属性判别结果;根据图像属性判别结果调整生成器的参数和判别器的参数并继续训练,当满足预设条件时停止训练,得到训练好的图像处理模型。采用本方法训练得到的图像处理模型能够提高图像和合成视频的质量。
技术领域
本申请涉及计算机技术领域,特别是涉及一种图像处理模型的训练方法、装置、计算机设备和存储介质。
背景技术
随着人工智能和计算机技术的发展,出现了人脸转换技术,人脸转换是指将目标图像中的人脸的身份换成源图像中的人,同时保持目标图像的姿态、表情、妆容、背景等元素。用户通过人脸转换可以体验虚拟换服装、换发型和视频换脸等,给用户带了乐趣。
由于视频是连续的图像序列,自然拍摄的视频通常在形状、光照、动作等因素的变化上都比较自然流畅,而现有的人脸转换通常会把脸部区域抠出进行单独处理,之后再把结果融合回原视频,会导致合成视频中的换脸区域在形状、光照、动作等方面与原视频不一致的情况。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高合成图像或合成视频质量的图像处理模型的训练方法、装置、计算机设备和存储介质。
一种图像处理模型的训练方法,所述方法包括:
获取三元组样本,所述三元组样本包括源图像、第一图像和目标图像;所述源图像和所述目标图像对应相同的身份属性,所述第一图像和所述源图像对应不同的身份属性;所述第一图像和所述目标图像对应相同的非身份属性;
将所述源图像和所述第一图像输入图像处理模型中的生成器,得到输出图像;
将所述源图像、所述第一图像、所述目标图像和所述输出图像输入所述图像处理模型中的判别器,得到图像属性判别结果;所述图像属性包括伪造图像和非伪造图像;
根据所述图像属性判别结果调整所述生成器的参数和所述判别器的参数并继续训练,当满足预设条件时停止训练,得到训练好的图像处理模型。
在一个实施例中,所述获取所述输出图像和所述目标图像之间的特征向量相似度,包括:
将所述输出图像和所述目标图像转换为对应的特征向量,得到所述输出图像的特征向量和所述目标图像的特征向量;
确定所述输出图像的特征向量和所述目标图像的特征向量之间的相似度,得到所述输出图像和所述目标图像之间的特征向量相似度。
在一个实施例中,获取所述输出图像和所述源图像之间的特征向量相似度,包括:
将所述输出图像和所述源图像转换为对应的特征向量,得到所述输出图像的特征向量和所述源图像的特征向量;
确定所述输出图像的特征向量和所述源图像的特征向量之间的相似度,得到所述输出图像和所述源图像之间的特征向量相似度。
一种图像处理模型的训练装置,所述装置包括:
获取模块,用于获取三元组样本,所述三元组样本包括源图像、第一图像和目标图像;所述源图像和所述目标图像对应相同的身份属性,所述第一图像和所述源图像对应不同的身份属性;所述第一图像和所述目标图像对应相同的非身份属性;
生成模块,用于将所述源图像和所述第一图像输入图像处理模型中的生成器,得到输出图像;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010156852.5/2.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序