[发明专利]用于识别人物情感的方法和装置

权利要求书

1.一种用于识别人物情感的方法，包括：

从待处理的人物视频中提取出人脸图像集合；

基于人脸图像之间的匹配关系，将所述人脸图像集合划分成至少一个人脸图像组，其中，不同的人脸图像组对应所述人物视频所显示的不同的人物；

对于所述至少一个人脸图像组中的每个人脸图像组，对该人脸图像组中的每张人脸图像进行表情识别，得到相应的表情识别结果，并基于该人脸图像组中的各张人脸图像分别对应的表情识别结果，确定该人脸图像组所对应的人物的情感信息。

2.根据权利要求1所述的方法，其中，表情识别结果包括表情标签；以及

所述基于该人脸图像组中的各张人脸图像分别对应的表情识别结果，确定该人脸图像组所对应的人物的情感信息，包括：

将该人脸图像组中的各张人脸图像分别对应的表情识别结果中的出现次数最多的表情标签确定为目标表情标签，并基于所述目标表情标签，确定该人脸图像组所对应的人物的情感信息。

3.根据权利要求2所述的方法，其中，所述基于所述目标表情标签，确定该人脸图像组所对应的人物的情感信息，包括：

确定该人脸图像组所对应的人物的情感信息包括所述目标表情标签。

4.根据权利要求2所述的方法，其中，所述目标表情标签预先关联情感状态；以及

所述基于所述目标表情标签，确定该人脸图像组所对应的人物的情感信息，包括：

确定该人脸图像组所对应的人物的情感信息包括所述情感状态。

5.根据权利要求1-4之一所述的方法，其中，所述从待处理的人物视频中提取出人脸图像集合，包括：

对所述人物视频进行间隔抽帧，并将抽取出的图像组成图像集合；

对所述图像集合中的各张图像分别进行人脸检测，得到人脸检测结果；

基于所述人脸检测结果，从所述图像集合中提取出人脸图像集合。

6.根据权利要求1-4之一所述的方法，其中，所述基于人脸图像之间的匹配关系，将所述人脸图像集合划分成至少一个人脸图像组，包括：

对所述人脸图像集合中的人脸图像进行聚类，以将所述人脸图像集合划分成至少一个人脸图像组。

7.根据权利要求1-4之一所述的方法，其中，所述对该人脸图像组中的每张人脸图像进行表情识别，得到相应的表情识别结果，包括：

将该人脸图像组中的每张人脸图像输入预先训练的卷积神经网络，得到相应的表情识别结果，所述卷积神经网络用于进行表情识别。

8.一种用于识别人物情感的装置，包括：

提取单元，被配置成从待处理的人物视频中提取出人脸图像集合；

划分单元，被配置成基于人脸图像之间的匹配关系，将所述人脸图像集合划分成至少一个人脸图像组，其中，不同的人脸图像组对应所述人物视频所显示的不同的人物；

识别单元，被配置成对于所述至少一个人脸图像组中的每个人脸图像组，对该人脸图像组中的每张人脸图像进行表情识别，得到相应的表情识别结果，并基于该人脸图像组中的各张人脸图像分别对应的表情识别结果，确定该人脸图像组所对应的人物的情感信息。

9.根据权利要求8所述的装置，其中，表情识别结果包括表情标签；以及

所述识别单元进一步被配置成：

对于所述至少一个人脸图像组中的每个人脸图像组，将该人脸图像组中的各张人脸图像分别对应的表情识别结果中的出现次数最多的表情标签确定为目标表情标签，并基于所述目标表情标签，确定该人脸图像组所对应的人物的情感信息。

10.根据权利要求9所述的装置，其中，所述识别单元进一步被配置成：

对于所述至少一个人脸图像组中的每个人脸图像组，确定该人脸图像组所对应的人物的情感信息包括相应的目标表情标签。