[发明专利]用于调整拍摄的用户的眼睛的显示装置和控制方法

说明书

相关申请的交叉引用

本申请要求于2013年1月9日向美国专利商标局提交的美国临时申请第61/750,536号的优先权，并且要求于2013年5月29日向韩国知识产权局提交的韩国专利申请第2013-0061214号的优先权，两者的公开内容通过引用整体合并于此。

技术领域

示范性实施例涉及显示装置及其控制方法。更具体地，示范性实施例涉及能够调整拍摄的用户的眼睛的显示装置和控制方法。

背景技术

由于电子技术和通信技术的发展，已经开发了能够执行各种功能的电子设备。例如，旧的TV只有通过接收广播信号输出广播节目的能力。但是，近来的TV能够执行另外的功能，诸如，互联网连接、视频呼叫、等等。

TV可以被提供为具有用于视频呼叫的摄像头。一般，摄像头被布置在TV的显示单元的边缘（例如，上边缘）周围，而进行视频呼叫的用户看向显示在屏幕上的对方，而不是看向摄像头。因此，由于摄像头捕捉到用户时用户眼睛朝向下方，从而眼睛朝向下方的用户被显示在视频呼叫的对方的TV上。同样地，用户的TV也会显示眼睛朝向下方的对方。因此，在用户和对方之间出现了眼睛的不一致，而这种眼睛的不一致成为了干扰在视频呼叫期间各方融入的因素。

在过去，为了解决这种涉及各方眼睛的不一致，已经使用了机械学方法、图像处理方法、等等。然而，根据显示设备的大小，解决这样问题的机械学方法是受到限制的。而图像处理方法校准用户眼睛注视的方向。然而，因为相关技术的图像处理方法仅仅补偿用户的眼睛区域，取决于看向显示装置时用户脸部的角度，可能出现用户脸部与眼睛不能自然匹配的问题。

因此，已经出现了对能够自然地处理所捕捉的用户眼睛而不管用户脸部的角度的技术的需要。

发明内容

已经开发了示范性实施例以便克服上述障碍以及与相关技术的安排相关的其他问题。示范性实施例的一个方面提供了能够自然地处理并输出拍摄的用户的眼睛的显示装置及其控制方法。

示范性实施例的上述方面和/或其它特征能够通过提供一种显示装置来基本实现，该显示装置可以包括：拍摄装置，其被配置为对脸部的形状进行拍摄；检测器，其被配置为检测脸部的形状的方向和角度；变形器，其被配置为对拍摄的脸部形状和3D脸部模型进行合成，并通过使用检测到的脸部的形状的方向和角度对合成的脸部形状进行变形；以及输出接口，其被配置为输出变形后的脸部形状。

变形器可以通过使用与拍摄的脸部的形状的脸部边界部分相关的信息，额外地对变形后的脸部形状的对应的脸部边界部分进行变形。

检测器可以从拍摄的脸部的形状中提取特征点，通过从存储的参考3D脸部模型中提取特征点来生成网格形式的参考3D脸部模型，并且可以通过投射网格形式的参考3D脸部模型并匹配对应的特征点来生成与拍摄的脸部的形状相对应的网格形式的3D脸部模型。

检测器可以通过使用网格形式的参考3D脸部模型和所生成的3D脸部模型的预定部分的位置上的差别来检测脸部形状的方向和角度。

变形器可以投射网格形式的3D脸部模型的预定部分，然后将对应的单位网格与拍摄的脸部形状的单位网格进行合成，以便生成网格形式的合成的脸部形状。

预定部分可以包括眼睛部分。

变形器可以将合成的脸部形状变形为面向其前部，即，面向前方。

变形器可以基于拍摄的脸部形状和变形后的脸部形状的脸部边界，检测由从脸部形状向内的预定间隙形成的第一边界和由从脸部形状向外的预定间隙形成的第二边界，以及可以通过使用与拍摄的脸部的形状的第一边界和第二边界之间的部分相关的信息，额外地对变形后的脸部形状的第一边界和第二边界之间的对应部分进行变形。

显示装置可以包括显示器，其被配置为显示变形后的脸部形状。

显示装置可以包括通信器，其被配置为执行以下功能中的至少一个：变形后的脸部形状数据的传送功能，以及与在外部显示装置中执行变形后的脸部形状数据相关的接收功能。

根据示范性实施例的另一个方面，控制显示装置的方法可以包括：对脸部形状进行拍摄；检测脸部形状的方向和角度；对拍摄的脸部形状和3D脸部模型进行合成；通过使用检测到的脸部形状的方向和角度对合成的脸部形状进行变形；并且输出变形后的脸部形状。

对合成的脸部形状进行变形可以包括通过使用与拍摄的脸部的形状的脸部边界部分相关的信息，额外地对变形后的脸部形状的对应的脸部边界部分进行变形。