[发明专利]情绪监视系统

说明书

相关申请的交叉引用

本申请基于2012年4月10日提交的日本专利申请2012-89493，在此引用其记载内容。

技术领域

本申请涉及一种情绪监视系统。

背景技术

在专利文献1中，公布了以下技术。取得车辆内的多位乘客的面部表情，将各乘客的表情的良好度与车外环境建立关联地学习，并按照时序进行检测。并且，提议乘客表情保持为良好的行驶路线(车外环境)。

在先技术文献

专利文献

专利文献1：特开2011–117905号公报

发明内容

在专利文献1所述的技术中，有关乘客的面部表情的信息仅用于路线选择支援处理，并不显示，因此各乘客无法了解其他乘客的情绪。本申请就是鉴于上述问题点而提出的，其目的在于提供一种能够使各乘客了解其他乘客的情绪的情绪监视系统。

本申请的一方面的情绪监视系统具备：面部图像取得部，能够针对车辆的两个以上的就坐位置，取得就坐于该就坐位置的乘客的面部图像；情绪信息取得部，基于由面部图像取得部取得的面部图像取得表示乘客的情绪的情绪信息；以及情绪显示制作部，制作与由情绪信息取得部取得的情绪信息对应的情绪显示。

本方面的情绪监视系统例如在车辆内有多位乘客时，能够制作表示各乘客的情绪的情绪显示。因此，即使乘客例如就坐于其他乘客无法直接看到的位置，也能够轻松地注意到那位乘客的异常情况等。

附图说明

通过一边参照附图一边进行下述的详细记述，有关本申请的上述目的以及其他目的、特征或优点将会变得更为明确。

图1为表示情绪监视系统的构成的框图，

图2为表示情绪监视系统所执行的主处理的流程图，

图3为表示情绪监视系统所执行的情绪判定处理的流程图，

图4为表示情绪监视系统所执行的情绪显示制作处理的流程图，

图5为表示乘客面部的AU(Action Unit：动作单元)的说明图，

图6为表示情绪显示的显示例的说明图，

图7为表示情绪显示的显示例的说明图，

图8为表示情绪显示的显示例的说明图，

图9为表示情绪显示的显示例的说明图。

具体实施方式

1.情绪监视系统1的构成

基于图1说明情绪监视系统1的构成。情绪监视系统1为搭载于车辆的车载系统，具备相机(camera，面部图像取得部)3、就坐位置检测部5、乘客识别部7、存储部9、特征量提取部11、情绪判定部(情绪信息取得部)13、情绪显示制作部15、存储部(第1存储部、第2存储部)17、以及界面(interface)部19。就坐位置检测部5、乘客识别部7、特征量提取部11、情绪判定部13、以及情绪显示制作部15由公知的计算机构成。

相机3设置于车室内的顶棚，其摄像范围覆盖车室内的所有就坐位置(驾驶席、副驾驶席、后侧右座席，后侧左座席等)。因而，相机3能够针对车室内的所有就坐位置拍摄就坐于该就坐位置的乘客101的面部以及身体。另外，亦可针对各就坐位置逐一设置相机3。此时，各相机3拍摄就坐于所对应的就坐位置的一位乘客101的面部以及身体。另外，作为相机3而言，亦可设置拍摄车室内的前方(驾驶席以及副驾驶席)的相机以及拍摄车室内的后方(后侧座席)的相机。

就坐位置检测部5根据由相机3拍摄的图像检测乘客101的就坐位置。即、通过图像识别，判断在由相机3拍摄的图像中，在各就坐位置，乘客101是否就坐。

乘客识别部7使用由相机3拍摄的图像，识别乘客101。详细后述。

存储部9存储用于识别乘客101的识别符。该识别符为能够通过图像识别从图像中提取的各乘客固有的特征，例如，能够列举出面部的图案(眼、鼻、嘴等的面部要素的形状或大小、面部要素相互之间的位置关系等)、衣服的形状或颜色、体型等。存储部9针对各乘客存储以往登记的乘客101的识别符。另外，在存储部9中，能够与识别符建立关联地存储就坐位置、后述的情绪信息、以及乘客的名称等。另外，存储部9存储情绪判定部13在判定情绪时所参照的数据库。

另外，在本申请中，“信息”既可作为不可数名词使用亦可作为可数名词使用。

特征量提取部11根据由相机3拍摄的图像识别乘客101的面部，进而，通过图像处理在其面部中提取预先设定的特征量(AU)。若在由相机3拍摄的图像中识别出多位乘客101的面部，则针对各位乘客提取特征量(AU)。另外，特征量提取的细节后述。