[发明专利]人物服装特征提取装置、人物检索装置及其处理方法

说明书

技术领域

本发明涉及从输入影像中提取人物服装特征的人物服装特征提取装置。另外，本发明涉及基于从输入影像中提取出的人物服装特征来检索人物的人物检索装置。进而，本发明涉及人物服装特征提取处理方法以及人物检索处理方法。

本申请基于2009年10月16日在日本提出的特愿2009-239360号专利申请而主动优先权，并将其内容引用于此。

背景技术

现有技术中，开发了各种人物检索方法以及监视系统、和图像储备检索系统。专利文献1公开了在监视系统中从所储备的影像中检索人物的人物检索方法。在该监视系统中，在录制影像时，提取人物的脸以及服装的信息并保存在数据库中。在人物检索时，将保存在数据库中的脸/服装特征与作为查询所被赋予的图像的脸/服装特征进行比较，来判定是否为同一人物。

参照图10来详述专利文献1中所公开的人物检索系统。图10表示人物检索装置的构成，由脸区域检测/脸特征提取部1000、1020、穿衣区域检测/穿衣特征提取部1010、1030、穿衣特征数据库1040、脸特征数据库1050、脸相似度计算部1070、以及人物相同性判定部1080构成。

脸区域检测/脸特征提取部1000从由监视系统取得的影像中进行脸区域检测以及脸特征提取，并将提取出的脸特征输出到脸特征数据库1050中。穿衣区域检测/穿衣特征提取部1010从由监视系统取得的影像中进行穿衣区域检测以及穿衣特征提取，并将提取出的穿衣特征输出到穿衣特征数据库1040中。另一方面，脸区域检测/脸特征提取部1020从所输入的查询图像中进行脸区域检测以及脸特征提取，并将查询脸特征输出给穿衣相似度计算部1070。脸相似度计算部1060比较储备于脸特征数据库1050中的脸特征和从脸区域检测/脸特征提取部1020输入的查询脸特征，并计算出脸相似度，将计算结果输出给人物相同性判定部1080。穿衣相似度计算部1070比较储备在穿衣特征数据库1040中的穿衣特征和从穿衣区域检测/穿衣特征提取部1030输入的查询穿衣特征，并计算出穿衣相似度，将计算结果输出给人物相同性判定部1080。人物相同性判定部1080基于脸相似度计算部1060所计算出的脸相似度和穿衣相似度计算部1070所计算出的穿衣相似度来判定人物的相同性，并输出人物检索结果。

接下来，说明图10所示的人物检索装置的动作。首先，将从监视系统取得的影像输入到脸区域检测/脸特征提取部1000以及穿衣区域检测/穿衣特征提取部1010。脸区域检测/脸特征提取部1000对输入影像的各帧进行脸区域检测，对所检测出的脸区域进行脸特征提取。从由输入影像检测出的脸区域中提取的脸特征被保存到脸特征数据库1050中。

穿衣区域检测/穿衣特征提取部1010从输入影像中检测穿衣区域，提取其视觉特征即穿衣特征。所提取出的穿衣特征被保存在穿衣特征数据库1040中。

人物检索时，将查询图像输入到脸区域检测/脸特征提取部1020以及穿衣区域检测/穿衣特征提取部1030。脸区域检测/脸特征提取部1020以及穿衣区域检测/穿衣特征提取部1030与所述脸区域检测/脸特征提取部1000以及穿衣区域检测/穿衣特征提取部1010发挥相同的作用，提取查询脸特征以及查询穿衣特征。

脸相似度计算部1060将查询脸特征与保存在脸特征数据库105中的脸特征进行比较，计算出脸相似度。另一方面，穿衣相似度计算部1070将查询穿衣特征与保存在穿衣相似度数据库1040中的穿衣特征进行比较，计算出穿衣相似度。人物相同性判定部1080综合脸相似度和穿衣相似度来判定人物相同性，并据此输出人物检索结果。

专利文献2公开了一种图像储备/检索系统，检索具有与表现人类主观感知的色调的色觉语言相符的图像特征的图像数据。在此，预先设定人类的自然语言所包含的色调表现与颜色空间的像素的对应关系。另外，从保存在数据库中的图像数据中提取像素，计算出与色调表现之间的相似度并保存。若赋予色调表现作为查询，则调查该色调表现与图像数据之间的相似度，检索相似度高的图像数据并显示。

在先技术文献

专利文献

专利文献1：JP特开2009-199322号公报

专利文献2：JP特开2009-3581号公报

发明的概要

发明要解决的课题