[发明专利]一种基于融合信息的外卖人员身份识别方法

权利要求书

1.一种基于融合信息的外卖人员身份识别方法，其特征在于包括如下步骤：

步骤(1)使用特征提取主干网络模块、特征融合模块、多尺度信息提取模块和空间注意力机制模块，构建深度学习网络MFCNet；

步骤(2)在PASCALVOC数据集上对深度学习网络MFCNet进行预训练，得到预训练识别模型；

步骤(3)对外卖人员身份特征信息图片进行收集并标识；收集的身份特征信息图片包括：外卖电动车、外卖logo、外卖箱和外卖服装；使用收集的数据集对步骤(2)中的预训练识别模型进行进一步训练，得到最终的检测模型；

步骤(4)将测试图片输入最终的MFCNet识别模型，检测出外卖电动车、外卖logo、外卖箱和外卖服装所属类别，对检测结果进行综合判断，以得出外卖人员身份类别；

步骤(2)所述，具体实现过程如下：

2.1将上述模块组合构成深度学习网络MFCNet，设置不同步长的学习批次，处理批次设置为32；动量和权值衰减分别设置为0.9和0.0005；

2.2下载PASCAL VOC数据集，使用PASCAL VOC数据集对深度学习网络MFCNet进行训练，获得预训练模型；

步骤(3)所述，具体实现过程如下：

3.1对外卖人员身份特征信息进行收集并标识；收集的身份特征信息包括：外卖电动车、外卖logo、外卖箱和外卖衣服，并进行相应的标记，做成数据集,标识规则如下：外卖名称：饿了么、美团、肯德基、麦当劳、德克士、其他；对应的外卖电动车标识：1、2、3、4、5、6；对应的外卖logo标识：7、8、9、10、11、12；对应的外卖衣服标识：13、14、15、16、17、18；对应的外卖箱标识：19、20、21、22、23、24；

3.2将2.2中预训练模型进行进一步训练，得到最终的MFCNet识别模型。

2.根据权利要求1所述的一种基于融合信息的外卖人员身份识别方法，其特征在于步骤(1)所述构建深度学习网络MFCNet，具体实现过程如下：

1.1使用VGG16作为主干网络用于得到主干网络特征图，称之为特征提取主干网络模块；

1.2构建特征融合模块，首先利用1*1的卷积层，来降维浅层特征图和深层特征图的通道，使得浅层特征图和深层特征图的通道数一致；然后对将经过降维的深层特征图通过上采样放大到和浅层特征图相同的尺寸；最后利用concate操作将所有相同尺寸的浅层特征图和深层特征图连接，形成主干网络融合特征图，从而能够保证不同特征图检测的同一个目标所包含的特征区域被激活；具体过程如图2所示：

1.3将步骤1.2中获取的主干网络融合特征图和步骤1.1中获取主干网络特征图进一步融合，即将主干网络融合特征图和主干网络特征图相加形成新的特征图；

1.4将进一步融合特征图送入多尺度信息提取模块，多尺度信息提取模块使用并行的空洞卷积操作；

1.5将多尺度融合特征图送入空间注意力机制模块，提取不同空间信息，得到包含关键信息的特征图。

3.根据权利要求2所述的一种基于融合信息的外卖人员身份识别方法，其特征在于步骤1.3具体实现如下：

1.3.1对主干网络特征图进行反卷积操作，使得主干网络特征图与特征融合模块输出的主干网络融合特征图具有相同的长宽，确保尺度完全一样；

1.3.2对主干网络融合特征图卷积操作，使得卷积后的主干网络融合特征图的通道数与步骤1.3.1反卷积后的主干网络特征图通道数相同；

1.3.3将经过卷积后的主干网络融合特征图与经过反卷积后的主干网络特征图进行像素级相加操作，得到新的进一步融合特征图。