[发明专利]图像合成方法、装置、计算机设备和存储介质在审
申请号: | 202010559322.5 | 申请日: | 2020-06-18 |
公开(公告)号: | CN111583168A | 公开(公告)日: | 2020-08-25 |
发明(设计)人: | 周康明;高凯珺 | 申请(专利权)人: | 上海眼控科技股份有限公司 |
主分类号: | G06T5/50 | 分类号: | G06T5/50;G06T7/194;G06K9/32;G06K9/62 |
代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 仝丽 |
地址: | 200030 上海市徐汇*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 图像 合成 方法 装置 计算机 设备 存储 介质 | ||
本申请涉及一种图像合成方法、装置、计算机设备和存储介质,首先,通过从所述目标区域图像组获取第一目标区域图像,从所述背景图像组中获取第一背景图像;其次,通过域判定模型计算所述第一目标区域图像的域和所述第一背景图像的域;根据所述第一目标区域图像的域和所述第一背景图像的域,通过域转换模型将所述第一目标区域图像、所述第一背景图像转换至同一域中,得到第二目标区域图像、第二背景图像中的至少一个,实现了将前景和背景迁移至同一域中;最后,将所述第二目标区域图像与所述第一背景图像或者所述第二背景图像进行合成,或者将所述第一目标区域图像与所述第二背景图像进行合成。
技术领域
本申请涉及计算机技术领域,特别是涉及一种图像合成方法、装置、计算机设备和存储介质。
背景技术
训练模型需要大量的数据以及对数据进行标注,且标注是一件费时费力的工作,因此,人们开始使用图像合成的方式进行数据扩充。
图像合成是图像处理的常用操作,传统的图像合成方法,从一张图像中提取感兴趣区域,并将感兴趣区域贴合在另一张图像上,从而生成一张新的合成图,合成图中已经存在标注信息,因此不需要再进行标注。可见,合成图可以用于数据增广,有着广泛的应用前景。
但是,通过传统的图像合成方式得到的合成图存在图像内容不和谐的技术问题,比如感兴趣区域在合成图中显得突兀。
发明内容
基于此,有必要针对上述技术问题,提供一种能够使得合成图的图像内容和谐的图像合成方法、装置、计算机设备和存储介质。
一种图像合成方法,所述方法包括:
从所述目标区域图像组获取第一目标区域图像,从所述背景图像组中获取第一背景图像;
通过域判定模型计算所述第一目标区域图像的域和所述第一背景图像的域;
根据所述第一目标区域图像的域和所述第一背景图像的域,通过域转换模型将所述第一目标区域图像、所述第一背景图像转换至同一域中,得到第二目标区域图像、第二背景图像中的至少一个;
将所述第二目标区域图像与所述第一背景图像或者所述第二背景图像进行合成,或者将所述第一目标区域图像与所述第二背景图像进行合成。
在其中一个实施例中,所述域判定模型包括全局判定模型和目标背景判定模型,所述全局判定模型用于辅助训练所述域转换模型;所述通过域判定模型计算所述第一目标区域图像的域和所述第一背景图像的域,包括:
通过所述目标背景判定模型计算所述第一目标区域图像的域和所述第一背景图像的域。
在其中一个实施例中,所述域判定模型和所述域转换模型的训练,包括:
构建真实样本集和造假样本集;
通过单独交替迭代训练的方式,利用所述真实样本集和所述造假样本集训练所述域判定模型和所述域转换模型;其中,计算所述目标背景判定模型的域验证损失。
在其中一个实施例中,所述真实样本集包括若干张真实图像,所述造假样本集包括若干张合成图像;所述目标背景模型的域验证损失的计算,包括:
根据所述真实图像的特征图和所述目标区域图像的特征图,计算第一相似度;
根据所述合成图像的特征图和所述目标区域图像的特征图,计算第二相似度;
根据所述第一相似度和所述第二相似度,确定所述目标背景模型的域验证损失。
在其中一个实施例中,按照如下公式进行所述域验证损失的计算:
其中,为所述域验证损失,I为所述真实图像的特征图,为所述合成图像的特征图,M为所述目标区域图像的特征图。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海眼控科技股份有限公司,未经上海眼控科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010559322.5/2.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序