[发明专利]一种基于观众观影表情识别的电影类型检测方法

说明书

技术领域

本发明涉及图像处理领域，尤其涉及一种基于观众观影表情识别的电影类型检测方法。

背景技术

电影由于拍摄的方式和设定的情节的多样性，因而存在不同类型。为电影划分类型是有必要的，通过划分电影类型后，能够为前来观影的观众进行电影选择提供重要依据，以选择出适合自己年龄段或者适合自己心理承受能力的电影进行观看。电影类型的划分一般在电影拍摄完但尚未正式上映前。如果不在电影正式上映前就将电影推广播放，其后果非常严重，例如，具有心脏病或心血管疾病的观众误选了情节过于夸张的恐怖片，很有可能导致观众触发疾病，造成严重的人身伤害。

因而，需要在电影正式上映前将其进行准确的等级划分。现有技术中，电影管理部门采取的电影类型划分方式一般是选择专业的电影人士提前观看待上映的电影，并在观看完毕后填写相关的调查表格，采用人工统计的模式统计多个调查表格以最终确定电影类型。这种方式虽然在一定程度上能够划分待上映的电影的类型，但是由于选择的人数过少，划分的准确性不高且不够合理，同时统计耗费了大量的人力，统计的效率不高。

由此可见，需要一种基于观众观影表情识别的电影类型检测方法，采用电子检测和电子统计的方式以替代原先的人工检测和人工统计方式，提高整个检测系统的自动化程度，避免过多的人工干预。

发明内容

为了解决上述问题，本发明提供了一种基于观众观影表情识别的电影类型检测方法，将所述检测系统设置在电影播放场地，首先采用高效率的图像处理技术检测多个观众的观影表情，然后基于多个观众的观影表情自动统计电影类型，这样，只需在待上映电影播放前征集多个观众进行观看即可在电影播放完毕时自动获取电影类型。

根据本发明的一方面，提供了一种基于观众观影表情识别的电影类型检测方法，该方法包括：1)提供一种基于观众观影表情识别的电影类型检测系统，位于电影播放场地，所述检测系统包括数字信号处理器和多个表情识别子系统，每一个表情识别子系统位于一个观众座椅的后背上，用于识别所述观众座椅后面的观影观众的面部表情，所述数字信号处理器与所述多个表情识别子系统分别连接，接收多个面部表情，并基于所述多个面部表情确定当前播放的电影类型；2)使用所述系统来进行检测。

更具体地，在所述基于观众观影表情识别的电影类型检测系统中，还包括：电影播放设备，用于播放待上映的电影，并在电影开始播放和电影结束播放时分别发出开播信号和停播信号；RS232串行通信设备，与所述电影播放设备连接，用于接收所述开播信号或所述停播信号；USB连接接口，用于插入外部U盘，自动读取外部U盘内预定存储区域所存储的各项数据，所述各项数据包括预设眼部基准图案、预设眉毛基准图案和预设嘴部基准图案，所述预设眼部基准图案为对基准眼部预先拍摄的图像，所述预设眉毛基准图案为对基准眉毛预先拍摄的图像，所述预设嘴部基准图案为对基准嘴部预先拍摄的图像；静态存储设备，与所述USB连接接口连接，用于接收并存储所述各项数据；液晶显示屏，与所述数字信号处理器连接，以接收并显示所述数字信号处理器输出的所述当前播放的电影类型；每一个表情识别子系统包括定时器、CMOS视觉摄像头、辅助照明设备、图像分割设备和单片机：定时器，为CMOS视觉摄像头的拍摄提供定时信号；CMOS视觉摄像头，与所述定时器连接，基于所述定时信号每隔预设定时时间间隔拍摄一次对应观影观众的面部表情，以输出观众表情图像，所述观众表情图像的分辨率为1920×1080；辅助照明设备，包括照明光源和亮度传感器，所述照明光源与所述亮度传感器连接，基于所述亮度传感器输出的环境亮度确定提供给所述CMOS视觉摄像头的辅助照明光的亮度；图像分割设备，与所述CMOS视觉摄像头和所述静态存储设备分别连接，基于所述预设眼部基准图案、所述预设眉毛基准图案和所述预设嘴部基准图案从所述观众表情图像中分别匹配出观众眼部区域、观众眉毛区域和观众嘴部区域，并将所述观众眼部区域、所述观众眉毛区域和所述观众嘴部区域分别从所述观众表情图像中分割出来，以分别获得所述观众眼部子图像、所述观众眉毛子图像和所述观众嘴部子图像；单片机，与所述图像分割设备和所述静态存储设备分别连接，基于所述观众眼部子图像确定观众眼部张开的幅度，基于所述观众眉毛子图像确定观众眉毛运动的形状，基于所述观众嘴部子图像确定观众嘴部张开的幅度，并基于BP神经网络输出观众表情，所述BP神经网络采用所述观众眼部张开的幅度、所述观众眉毛运动的形状和所述观众嘴部张开的幅度作为输入，将害怕、愤怒、悲哀、高兴、厌恶、惊奇和平静这7种观众表情之一作为输出，采用预设的训练样本和预设的测试样本，采用BP算法作为学习算法，其中所述预设的训练样本、所述预设的测试样本和所述BP算法都存储在所述静态存储设备中；所述数字信号处理器与所述RS232串行通信设备、所述静态存储设备和所述多个表情识别子系统分别连接，在接收到所述开播信号时，启动所述多个表情识别子系统以接收每一个表情识别子系统定时输出的观众表情，在接收到所述停播信号时，关闭所述多个表情识别子系统以停止接收每一个表情识别子系统输出的观众表情，并在接收到所述停播信号时基于接收到的所有观众表情统计所述当前播放的电影类型；其中，每一个表情识别子系统还包括红外线检测仪，用于检测对应的观众座椅后面的观影观众是否存在，并在检测到对应的观众座椅后面的观影观众不存在的情况下，向所述数字信号处理器发送关闭信号，所述数字信号处理器在接收到所述关闭信号时，关闭发出关闭信号的红外线检测仪所在的表情识别子系统；照明光源基于所述亮度传感器输出的环境亮度确定提供给所述CMOS视觉摄像头的辅助照明光的亮度包括：调整所述辅助照明光的亮度使得所述辅助照明光的亮度与所述环境亮度成反比。