[发明专利]电子装置及其控制方法

说明书

一种用于提供增强现实显示的电子装置，增强现实显示包括与显示在显示装置上的用户界面相对应的虚拟用户界面，并且电子装置经由虚拟用户界面接收用于控制显示装置的输入。

技术领域

本公开的实施例涉及一种电子装置、电子装置的控制方法以及使用该电子装置的控制方法的计算机程序产品，并且更具体地涉及一种显示与显示装置有关的用户界面(UI)的电子装置、电子装置的控制方法和使用该电子装置的控制方法的计算机程序产品。

背景技术

诸如电视机(TV)的显示装置根据通过用户界面(UI)接收的用户输入来操作。UI可以是输入设备，诸如遥控器等。通常，对于通过UI的用户输入，可以使用提供在遥控器上的方向键或使用诸如陀螺仪的传感器的运动输入。

因此，当使用运动输入时存在问题，即在用户输入的利用范围受限的情况下，如果运动的行进距离较短，则可能无法识别该运动，从而使运动识别难以精确地应用。另外，由于通过TV屏幕提供的UI的类型、种类和数量受到限制，因此需要各种用户输入模型。

近来，电子装置，即混合现实(MR)设备，其向用户提供所谓的混合现实(MR)或增强现实(AR)环境(在该环境中虚拟对象被合并到现实世界中)变得越来越受欢迎。MR设备向用户提供由全息图对象或虚拟图像增强的物理环境的视图，并且可以接收用户的输入(例如运动或语音识别)以与混合现实或增强现实环境交互。

发明内容

技术问题

实施例至少解决以上问题和/或其他缺点和上面未描述的缺点。

实施例可以提供电子装置、该电子装置的控制方法以及使用该电子装置的控制方法的计算机程序产品，该电子装置使能(enable)使用电子装置对于显示装置的用户输入用于提供混合现实(MR)。

此外，实施例可以提供电子装置、该电子装置的控制方法以及使用该电子装置的控制方法的计算机程序产品，该电子装置经由MR环境提供与各种类型的显示装置有关的用户界面(UI)。

此外，实施例可以提供电子装置、该电子装置的控制方法以及使用该电子装置的控制方法的计算机程序产品，该电子装置使能对显示在屏幕上的UI进行远程和精确的选择。

另外，实施例可以提供电子装置、该电子装置的控制方法以及使用该电子装置的控制方法的计算机程序产品，该电子装置可以放大屏幕区域以向用户提供与显示装置有关的各种UI。

技术方案

根据实施例的一方面，提供了电子装置，其包括：相机，被配置用于捕获图像；通信器，被配置用于与显示装置通信；显示器；处理器，被配置用于：从显示装置接收位置信息、控制显示器在与位置信息相对应的图像的位置上显示虚拟UI、以及控制通信器将与对于虚拟UI的用户输入相对应的信息发送到显示装置。因此，能够使用显示其中混合了捕获图像和虚拟UI的图像的MR设备来远程控制(remotely control)显示装置。

处理器可以被配置用于从图像中确定显示装置的屏幕区域，并控制显示器以在图像上的屏幕区域的给定位置上显示虚拟UI。因此，基于TV屏幕区域的位置来显示虚拟UI，因此可以准确地检测虚拟UI的用户输入位置。

处理器可以被配置用于控制显示器以将虚拟UI定位在屏幕区域的顶部、底部、左侧或右侧中的至少一处。因此，可以放大屏幕区域以向用户提供与显示装置有关的各种虚拟UI。

处理器可以被配置用于控制显示器，使得虚拟UI被定位屏幕区域中以对应于在显示装置的屏幕上显示的菜单。因此，用户可以像选择在TV屏幕上显示的UI一样自由地选择虚拟UI。

处理器可以被配置用于控制显示器在由显示器提供的用户观看区域(view area)中的预设位置上显示虚拟UI。因此，可以总是显示频繁使用的菜单，而不管用户观看区域如何改变，从而有助于用户的便利。