[发明专利]群体情绪行为分析方法和装置、电子设备、介质、产品

说明书

本发明实施例公开了一种群体情绪行为分析方法和装置、电子设备、介质、产品，其中，方法包括：对包括至少一个人的群体进行图像采集，获取至少一个群体图像；分别对所述至少一个群体图像执行人脸识别，获得至少一个人脸图像，和/或分别对至少一个群体图像执行人体识别，获得至少一个人体图像；基于至少一个人脸图像和/或至少一个人体图像，确定群体中至少一个人的情绪和/或行为。本发明实施例相对人工分析情绪和/或行为提高了分析的速度和准确度，并可实现同时对群体的情绪和行为进行分析。

技术领域

本发明涉及计算机视觉，尤其是一种群体情绪行为分析方法和装置、电子设备、介质、产品。

背景技术

学生在课堂上的身体状态、学习状态和心理状态的识别，对学校教学管理工作而言十分重要。老师需要知道课堂上学生的注意力是否集中、精力是否充沛、知识点有没有听懂，当部分学生有心理或健康问题时，也需要及时被发现。但是实际中，老师无法兼顾到班级的每个学生，也不可能在授课的同时关注到每一个学生的状态变化。

发明内容

本发明实施例提供的一种群体情绪分析技术。

根据本发明实施例的一个方面，提供的一种群体情绪行为分析方法，包括：

对包括至少一个人的群体进行图像采集，获取至少一个群体图像；

分别对所述至少一个群体图像执行人脸识别，获得至少一个人脸图像，和/或分别对所述至少一个群体图像执行人体识别，获得至少一个人体图像；

基于所述至少一个人脸图像和/或所述至少一个人体图像，确定所述群体中至少一个人的情绪和/或行为。

可选地，在基于所述至少一个人脸图像，确定所述群体中至少一个人的情绪之前，还包括：

基于所述至少一个人脸图像与数据库中预存的标准人脸图像进行匹配，所述数据库中存储至少一个标准人脸及其身份信息；

基于匹配结果确定所述人脸图像对应的身份信息。

可选地，所述基于所述至少一个人脸图像，确定所述群体中至少一个人的情绪，包括：

基于所述人脸图像确定所述人脸图像对应的人脸表情；

基于所述人脸表情确定所述人脸图像对应的人的情绪分类。

可选地，所述基于所述人脸图像确定所述人脸图像对应的人脸表情，包括：

基于人脸表情分类网络对所述至少一个人脸图像进行人脸表情分类，确定所述人脸图像对应的人脸表情；所述人脸表情分类网络经过已知人脸表情分类的样本人脸图像训练获得。

可选地，所述基于所述人脸表情确定所述人脸图像对应的人的情绪分类，包括：

将所述人脸表情与至少一种情绪分类对应的人脸表情进行匹配，基于匹配结果确定所述人脸图像对应的人的情绪分类，所述情绪分类包括正常情绪和非正常情绪，所述正常情绪对应至少一个人脸表情，所述非正常情绪对应至少一个人脸表情。

可选地，响应于所述人脸表情对应非正常情绪，执行干预操作。

可选地，所述基于所述至少一个人脸图像，确定所述群体中至少一个人的情绪之后，还包括：

基于所述人脸图像对应的身份信息及其对应的情绪分类，获得所述群体的情绪分析结果，所述情绪分析结果包括至少一条情绪记录，每条所述情绪记录包括所述群体中一个人对应的身份信息和情绪分类；

将所述群体的情绪分析结果发送给客户端，并根据所述客户端的反馈信息执行干预操作。

可选地，所述情绪记录还包括所述情绪分类对应的时间信息；