[发明专利]一种全景环视图像拼接融合方法和装置有效
申请号: | 201811188769.5 | 申请日: | 2018-10-12 |
公开(公告)号: | CN109509148B | 公开(公告)日: | 2023-08-29 |
发明(设计)人: | 李良;刘中元;涂强;肖志光 | 申请(专利权)人: | 广州小鹏汽车科技有限公司 |
主分类号: | G06T3/40 | 分类号: | G06T3/40;G06N3/0475;G06N3/045;G06N3/094 |
代理公司: | 广州嘉权专利商标事务所有限公司 44205 | 代理人: | 胡辉 |
地址: | 510000 广东省广州市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 全景 环视 图像 拼接 融合 方法 装置 | ||
1.一种全景环视图像拼接融合方法,其特征在于,所述方法包括以下步骤:
将经过拼接所得到的待处理图像输入到经过预先训练的生成式对抗网络,从而输出全景环视图像;所述生成式对抗网络包括生成器和鉴别器,所述预先训练包括:
将第一训练集输入到生成器中进行处理;所述第一训练集包括多个第一样本图像,所述第一样本图像是由多个部分拼接得到的;
将生成器的处理结果与第二训练集输入到鉴别器中进行比较,从而计算出比较结果;所述第二训练集包括多个第二样本图像,所述第二样本图像是通过直接拍摄得到的,所述第二样本图像的内容与第一样本图像的内容相对应;
根据比较结果对生成器进行调整,然后返回至将第一训练集输入到生成器中进行处理这一步骤开始重新执行,直到所述比较结果收敛为止;
所述将第一训练集输入到生成器中进行处理这一步骤之前,还对第一训练集进行预处理;
所述预处理具体包括以下步骤:
对每个第一样本图像上各部分拼接所形成的邻接区域进行标记;
删除各第一样本图像上除邻接区域以外的其他部分。
2.根据权利要求1所述的一种全景环视图像拼接融合方法,其特征在于,所述预先训练的优化目标函数为式中,g为生成器,D为鉴别器,x为鉴别器的输入值,Pg为第一样本图像的分布,Pr为第二样本图像的分布,E表示数学期望运算,所述max表示最大化运算,所述min表示最小化运算。
3.根据权利要求1所述的一种全景环视图像拼接融合方法,其特征在于,所述比较结果为Wasserstein距离。
4.根据权利要求3所述的一种全景环视图像拼接融合方法,其特征在于,所述Wasserstein距离的计算公式如下:
式中,W(Pr,Pg)为Pg与Pr之间的Wasserstein距离,Pg为第一样本图像的分布,Pr为第二样本图像的分布,∏(Pr,Pg)为Pg和Pr组合起来的所有可能出现的联合分布的集合,(x,y)为∏(Pr,Pg)中的一个取样值,E表示数学期望运算,inf表示取下边界运算。
5.根据权利要求1-4任一项所述的一种全景环视图像拼接融合方法,其特征在于,所述预先训练中,对第一训练集进行批归一化处理。
6.根据权利要求5所述的一种全景环视图像拼接融合方法,其特征在于,所述批归一化处理是第一样本图像在生成器前向传播的过程中,在第一样本图像经过生成器的每一网络层之前进行的。
7.一种全景环视图像拼接融合装置,其特征在于,包括存储器和处理器,所述存储器用于存储至少一个程序,所述处理器用于加载所述至少一个程序以执行权利要求1-6任一项所述方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州小鹏汽车科技有限公司,未经广州小鹏汽车科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811188769.5/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序