[发明专利]图像融合的方法、装置、车辆及存储介质

权利要求书

1.一种图像融合的方法，其特征在于，所述方法包括：

获取多个图像采集装置采集的图像；

获取每个图像的图像特征；

将每个图像的图像特征作为预先训练的图像融合模型的输入，得到所述图像融合模型输出的融合后的目标图像，所述图像融合模型用于将多个所述图像特征拼接为目标特征向量，对所述目标特征向量进行编码，得到编码后的编码向量，对所述编码向量进行解码，得到所述目标图像。

2.根据权利要求1所述的方法，其特征在于，所述图像融合模型包括编码模块和解码模块，所述编码模块用于：

对所述目标特征向量按照第一编码方式进行编码，得到第一编码向量；

对所述目标特征向量按照第二编码方式进行编码，得到第二编码向量；

所述解码模块用于：

对所述第一编码向量和所述第二编码向量进行解码处理，得到所述目标图像。

3.根据权利要求2所述的方法，其特征在于，所述对所述目标特征向量按照第一编码方式进行编码，得到第一编码向量包括：

对所述目标特征向量进行维度变换，得到第一变换特征向量；

对所述第一变换特征向量进行位置编码，得到第一位置向量；

将所述第一变换特征向量与所述第一位置向量之和，作为所述第一编码向量。

4.根据权利要求3所述的方法，其特征在于，所述对所述目标特征向量进行维度变换，得到第一变换特征向量包括：

将所述目标特征向量中的高度和宽度进行扁平化处理，得到第一中间特征向量；

在所述第一中间特征向量中的维度数与预设的维度数不相等的情况下，对所述第一中间特征向量进行线性变换，得到所述第一变换特征向量。

5.根据权利要求4所述的方法，其特征在于，所述对所述目标特征向量进行维度变换，得到第一变换特征向量还包括：

在所述第一中间特征向量中的维度数与预设的维度数相等的情况下，将所述第一中间特征向量作为所述第一变换特征向量。

6.根据权利要求2所述的方法，其特征在于，所述对所述目标特征向量按照第二编码方式进行编码，得到第二编码向量包括：

对所述目标特征向量进行维度变换，得到第二变换特征向量；

对所述第二变换特征向量进行位置编码，得到第二位置向量；

将所述第二变换特征向量、所述第二位置向量与预设的查询向量之和，作为所述第二编码向量。

7.根据权利要求6所述的方法，其特征在于，所述对所述目标特征向量进行维度变换，得到第二变换特征向量包括：

对所述目标特征向量进行池化处理，得到第二中间特征向量；

在所述第二中间特征向量中的图像采集装置的数量与所述第二中间特征向量中的维度数之积，不等于所述查询向量中的维度数的情况下，对所述第二中间特征向量进行线性变换，得到所述第二变换特征向量。

8.根据权利要求7所述的方法，其特征在于，所述对所述目标特征向量进行维度变换，得到第二变换特征向量还包括：

在所述第二中间特征向量中的图像采集装置的数量与所述第二中间特征向量中的维度数之积，等于所述查询向量中的维度数的情况下，将所述第二中间特征向量作为所述第二变换特征向量。

9.一种图像融合的装置，其特征在于，所述装置包括：

第一获取模块，被配置为获取多个图像采集装置采集的图像；

第二获取模块，被配置为获取每个图像的图像特征；

融合模块，用于将每个图像的图像特征作为预先训练的图像融合模型的输入，得到所述图像融合模型输出的融合后的目标图像，所述图像融合模型用于将多个所述图像特征拼接为目标特征向量，对所述目标特征向量进行编码，得到编码后的编码向量，对所述编码向量进行解码，得到所述目标图像。