[发明专利]图像处理方法、装置、可读介质及电子设备在审
申请号: | 202011159192.2 | 申请日: | 2020-10-26 |
公开(公告)号: | CN112258622A | 公开(公告)日: | 2021-01-22 |
发明(设计)人: | 薛舟;王光伟 | 申请(专利权)人: | 北京字跳网络技术有限公司 |
主分类号: | G06T15/50 | 分类号: | G06T15/50;G06T15/00;G06T5/50 |
代理公司: | 北京英创嘉友知识产权代理事务所(普通合伙) 11447 | 代理人: | 曹寒梅 |
地址: | 100190 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 图像 处理 方法 装置 可读 介质 电子设备 | ||
本公开涉及一种图像处理方法、装置、可读介质及电子设备,以提升图像处理的光照效果。所述方法包括:获取第一图像和第二图像;通过信息提取模型,确定第一图像的目标属性信息;获取第二图像中指定位置处的目标光照信息;根据目标属性信息和目标光照信息,利用重光照技术对第一图像进行图像渲染,获得处理后的目标图像;其中,信息提取模型基于初始模型获得,初始模型用于提取图像属性信息及光照信息,在每一次训练过程中,将训练图像输入至初始模型后,根据初始模型针对训练图像的输出内容得到合成图像,并确定合成图像相比于训练图像的目标损失值,若不满足停止训练条件,利用目标损失值更新初始模型,并将更新后的初始模型用于下一次训练。
技术领域
本公开涉及图像处理领域,具体地,涉及一种图像处理方法、装置、可读介质及电子设备。
背景技术
在一些情景中,常常需要将一张图像添加到另一张图像(例如,单个图像、视频中的图像等)中,进而将一张图像中的内容置入另一张图像的场景中。例如,在房屋装修设计中,会将某种家具的图像添加到房间图像中,以将该家具置入房间场景,从而观察该家具放置到房间中某个位置的效果。再例如,在商品展示过程中,通常需要观察将某商品添加到某个特定场景中的效果,从而需要将商品图像添加到场景图像中。而通常情况下,待添加的图像对应一定的光影变化,被添加内容的图像场景中也存在光影的变化,两种光影变化情况通常是不同的,若直接进行图像的添加,添加后所得到的新图像中一者的光影将与另一者的光影不一致,甚至相悖,图像处理效果不佳。
发明内容
提供该发明内容部分以便以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。该发明内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。
第一方面,本公开提供一种图像处理方法,所述方法包括:
获取第一图像和第二图像;
通过信息提取模型,确定所述第一图像的目标属性信息,属性信息包括深度信息、法向信息、颜色信息和材质信息中的至少一者;
获取所述第二图像中指定位置处的目标光照信息;
根据所述目标属性信息和所述目标光照信息,利用重光照技术对所述第一图像进行图像渲染,获得处理后的目标图像;
其中,所述信息提取模型基于初始模型获得,所述初始模型用于提取图像的属性信息及光照信息,以及,在每一次训练所述信息提取模型的过程中,将训练图像输入至所述初始模型后,根据所述初始模型针对所述训练图像的输出内容得到合成图像,并确定所述合成图像相比于所述训练图像的目标损失值,若不满足停止训练条件,利用所述目标损失值更新初始模型,并将更新后的初始模型用于下一次训练。
第二方面,本公开提供一种图像处理装置,所述装置包括:
第一获取模块,用于获取第一图像和第二图像;
确定模块,用于通过信息提取模型,确定所述第一图像的目标属性信息,属性信息包括深度信息、法向信息、颜色信息和材质信息中的至少一者;
第二获取模块,用于获取所述第二图像中指定位置处的目标光照信息;
第一处理模块,用于根据所述目标属性信息和所述目标光照信息,利用重光照技术对所述第一图像进行图像渲染,获得处理后的目标图像;
其中,所述信息提取模型基于初始模型获得,所述初始模型用于提取图像的属性信息及光照信息,以及,在每一次训练所述信息提取模型的过程中,将训练图像输入至所述初始模型后,根据所述初始模型针对所述训练图像的输出内容得到合成图像,并确定所述合成图像相比于所述训练图像的目标损失值,若不满足停止训练条件,利用所述目标损失值更新初始模型,并将更新后的初始模型用于下一次训练。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字跳网络技术有限公司,未经北京字跳网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011159192.2/2.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序