[发明专利]一种基于信息增强的多视角分类器及其设计方法

说明书

本发明公开了一种基于信息增强的多视角分类器及其设计方法，该多视角分类器包括依次相连的多视角数据收集模块、缺失样本信息修复模块以及有效样本信息增强模块。本发明通过缺失样本信息修复、有效样本信息增强等两个方面，在相关接口作用下，用于港口等领域，能够有效提升多视角数据集在实际场景中的分类性能。

技术领域

本发明涉及多视角学习技术领域，具体涉及一种基于信息增强的多视角分类器及其设计方法。

背景技术

在全面打造“智慧城市”的过程中，人们需要处理的数据集往往具有多种表现形式或来源。这类数据集被称为多视角数据集，一种表现形式或来源就是一个视角(如网页数据集中的文本、图像、视频)，而任一视角中所包含的不同种类的信息则被称为特征(如文本视角中的文本颜色、文本大小、文本粗细)。不同于表现形式或来源单一的单视角数据集，由于多视角数据集本身结构相对复杂，所以处理难度更高，一般需要通过基于该类数据集而提出的多视角分类器来解决。另外，就多视角数据集的特征而言，还进一步分为全局特征和局部特征。前者也被称为粗粒度特征，主要用于模糊匹配并描述主要特征信息，如轮廓、颜色等整体信息；后者又被称为细粒度特征，主要用于精细匹配并描述细节信息，如集装箱某一位置的特殊标记、特殊生物对应的光谱谱图上的某处信息等。由于局部特征对样本之间的微小差异更敏感，所以当前多视角分类器在设计时会更多的考虑局部特征。

然而，在海关、港口、交通等领域中，受限于采样技术、人力成本等客观因素，会造成处理的多视角数据集呈现特殊化，具体表现为：(1)视角或特征信息缺失：由于采样技术的限制，人们在采集多视角数据集时，会因人为疏忽或采集设备的故障，导致部分采集到的样本在某些视角或特征上信息不全，从而可能导致数据集缺失部分对分类器设计具有重要作用的视角或特征信息。举例而言，用四个摄像头对一个物体进行持续性拍摄并记录下颜色、大小、轮廓等特征信息从而采集数据集(本例中，一个摄像头的采样信息组成一个视角)。因为某一摄像头在某一时间段发生临时性故障无法工作，则该时间段内采集的物体样本就会失去一个视角的信息。若某一摄像头在某一时间段受到电磁干扰，则针对相关视角，该时间段内采集的信息会出现部分特征丢失的情况，如轮廓不清晰，大小信息并没有获得记录等；(2)有标签样本比重过小：由于人力成本的限制，对于大量真实多视角数据集而言，仅有一部分样本事先获得了标记，而大部分参与分类器设计的训练样本没有得到类别标记。通常，获得标记的样本被称为有标签样本，它们可以提供有利于分类器设计的先验知识，而没有标记的样本被称为无标签样本，它们提供的先验知识较少。因此，对于真实多视角数据集而言，由于有标签样本占比较低，导致它们通常具有的有效样本信息较少，而过多的无标签样本又可能干扰分类器设计，从而导致分类器性能受到影响。

由于真实场景中，多视角数据集呈现特殊化，从而影响传统分类器的自动工作性能，并被迫需要过多的人工干预，从而降低真实场景中的作业效率。

为处理这些特殊的多视角数据集，人们从传统的多视角分类器设计思想(包含协同训练、多核学习、子空间学习、多矩阵学习、间隔一致性等)转变到特殊多视角分类器设计，并提出了相应的处理方案。