[发明专利]一种基于室内机会信号增强的场景识别方法及装置

说明书

本发明提供了一种基于室内机会信号增强的场景识别方法及装置，通过运用迁移学习训练卷积神经网络获取室内定位点场景级别影像特征，并通过定位点的定位信息和场景底图与定位误差描述定位点的定位特征，然后利用该定位特征来对影像特征进行扩充增强，采用深度学习的方法融合影像特征与定位特征来进行场景识别预测，从而实现了获得更高的场景识别正确率的技术效果。

技术领域

本发明涉及室内场景识别技术领域，具体涉及一种基于室内机会信号增强的场景识别方法及装置。

背景技术

场景识别问题属于计算机视觉领域的一个极富挑战的课题，应用在自动驾驶、机器人等各个领域。

现有场景识别方法通常以图像特征分析的方式进行识别与分类，例如传统图像处理和模式识别相关的研究进行场景图像的分类和标记，但是需要大量的人工操作并且算法较为复杂。还有一些在大规模数据集上利用深度学习方法，然而对于室内环境而言，其场景包含复杂的装饰和布局，所以利用深度学习解决室内场景识别仍然存在识别准确率不高的问题。

由上可知，现有技术中的场景识别方法存在识别准确率不高的技术问题。

发明内容

本发明通过提供一种基于室内机会信号增强的场景识别方法及装置，用以解决或者至少部分解决现有技术中的场景识别方法存在识别准确率不高的技术问题。

本发明第一方面提供了一种基于室内机会信号增强的场景识别方法，包括：

步骤S1：针对预设应用场景，采集典型的场景影像集；

步骤S2：结合与待研究场景对应的场景底图，在所述待研究场景的主要道路上采集移动设备的定位信息和影像信息，其中，所述定位信息和影像信息与定位点对应；

步骤S3：将所述场景影像集输入预设特征融合神经网络中，对所述预设特征融合神经网络的卷积神经网络模块进行模型微调，获得迁移至所述待研究场景的卷积神经网络模型，其中，所述预设特征融合神经网络包括影像特征提取模块和特征融合决策模块，所述影像特征提取模块由所述卷积神经网络模块实现，将与定位点对应的影像信息转化为影像特征向量；

步骤S4：将定位点与所述场景底图进行叠加，获得定位点处于场景中的位置特征向量；

步骤S5：将以定位点为中心、预设定位误差为半径的误差圆与所述场景底图进行叠加，获得所述误差圆与各场景的相交面积，并根据所述相交面积，获得所述定位点与各场景的关系特征向量；

步骤S6：将定位点处于场景中的位置特征向量与定位点与各场景的关系特征向量，拼接为定位特征向量，再将所述定位特征向量与定位点对应的影像特征向量拼接后，输入所述特征融合决策模块，训练该所述特征融合决策模块的参数；

步骤S7：将进行模型微调后获得的影像特征提取模块与步骤训练后的特征融合决策模块的参数固定，获得合并后的特征融合神经网络；

步骤S8：将定位点对应的影像信息和定位点与各场景的关系特征向量输入所述合并后的特征融合神经网络，得到场景预测特征向量，将所述预测特征向量中概率最高项对应的场景类型作为场景识别结果。

进一步地，步骤S3具体包括：

步骤S3.1：将所述场景影像集输入预设特征融合神经网络中，对所述卷积神经网络模块进行训练，更新所述卷积神经网络模块的全连接层参数，保留卷积层的参数，获得模型微调后卷积神经网络模块，将其作为模型微调后的影像特征提取模块；

步骤S3.2：将与定位点对应的影像信息输入所述模型微调后卷积神经网络模块，获得输出张量，将其作为所述影像特征向量，且所述影像特征向量与定位点相对应。

进一步地，步骤S4具体包括：