[发明专利]表情辨识系统、表情辨识方法及表情辨识程序

说明书

本发明是有关一种表情辨识系统，具备头戴式显示器及表情辨识装置，其中：前述头戴式显示器具有：第1摄影机，用以拍摄使用者眼部；第2摄影机，用以拍摄使用者口部；及输出部，用以输出通过前述第1摄影机拍摄的第1图片与通过前述第2摄影机拍摄的第2图片；前述表情辨识装置具有：接收部，用以接收通过前述输出部输出的第1图片与第2图片；及表情辨识部，用以根据前述第1图片与前述第2图片来辨识前述使用者的表情。

技术领域

本发明涉及一种头戴式显示器。

背景技术

已知有一种技术是将近红外线等非可见光照射到使用者的眼部，并通过解析包含其反射光的使用者眼部的图片来检测使用者的视线方向的技术。检测出的使用者的视线方向信息，是例如反映到PC或游戏机等的显示器，作为指向装置使用的情形也开始变得具现实性。

现有技术文献

专利文献

专利文献1：日本特开平第2-264632號公報

非专利文献

非专利文献1：URL：

http://www.hao-li.com/publications/papers/siggraph2015FPSHMD.pdf(2015年11月24日)

发明要解决的课题

有的头戴式显示器具有对配戴的使用者展现三维影像的功能。一般而言，头戴式显示器是以覆盖使用者视野的方式配戴使用。然后，如上述，在将使用者的视线方向作为指向装置使用的内容中，期望可提供更能引起使用者兴趣的内容。

本发明是有鉴于上述需求而完成者，其目的在于提供一种头戴式显示器，可输出用以提供更能引起使用者兴趣的内容的信息。

发明内容

为了解决上述的课题，本发明的某态样是具备头戴式显示器及表情辨识装置的表情辨识系统；其中：头戴式显示器具有：第1摄影机，用以拍摄使用者眼部；第2摄影机，用以拍摄使用者口部；及输出部，用以输出通过第1摄影机拍摄的第1图片与通过第2摄影机拍摄的第2图片；表情辨识装置具有：接收部，用以接收通过输出部输出的第1图片与第2图片；及表情辨识部，用以根据第1图片与第2图片来辨识使用者的表情。

此外，头戴式显示器也可更具有：光源，用于对使用者的眼部照射非可见光；及第3摄影机，用以拍摄由使用者的眼部反射的非可见光；其中，输出部输出第3摄影机拍摄的第3图片；表情辨识装置也可更具有：视线检测部，用以根据通过接收部接收到的第3图片来检测使用者的视线方向。

表情辨识装置也可更具备：合成部，用以合成通过接收部接收到的第1图片与第2图片以制作合成图片；表情辨识部根据合成图片辨识使用者的表情。

此外，第2摄影机也可以可自由装卸的方式装设于头戴式显示器上。

此外，第2摄影机，在使用者配戴头戴式显示器的情况下，也可以使视角成为可拍摄自使用者的鼻到肩为止的范围的方式，装设于头戴式显示器上。

此外，表情辨识装置也可更具有：姿势推测部，用以根据通过接收部接收到的第2图片来推测使用者的姿势。

此外，头戴式显示器也可以覆盖使用者眼部周围而不覆盖使用者口部的方式构成。

第1摄影机与第2摄影机是用以取得表示到拍摄对象为止距离的深度信息的摄影机，表情辨识系统也可更具备：虚拟使用者图片产生部，用以根据第1摄影机拍摄到的使用者的眼部与第2摄影机拍摄到的使用者的口部来识别使用者眼部与口部的三维形状，并根据所识别的三维形状，产生反映了使用者的虚拟使用者的眼部与口部形状的虚拟使用者图片。