[发明专利]在未包括在终端装置视野中的对象上提供信息的方法、终端装置和计算机可读记录介质

说明书

技术领域

本发明涉及一种用于在未包括在终端视野中的对象上提供信息的方法、终端和计算机可读记录介质；更具体而言，涉及利用以增强现实（AR）形式通过终端输入的图像显示关于对象存在、位置和方向的信息，使得用户能够识别终端视野中不包括的对象并有效获得关于对象的信息的方法、终端和计算机可读记录介质。

背景技术

近来，由于因特网的广泛使用，提供转换成数字形式的地理信息已经很常见，该地理信息曾经以例如书本的印刷形式提供的。在线提供的数字地图服务、车辆中安装的导航系统等可以是范例。这样一来，数字化地理信息的好处之一是通过用户界面为用户提供各种方便功能，用户界面能够允许用户检索期望的地理信息。此外，通过远程更新服务等可以容易地更新地理信息的变化，从而在最新地理信息方面，这样的数字数据可以比常规印刷材料更优越。

具体而言，最近介绍了一种技术，以增强现实（AR）的形式提供地理信息，显示附加信息，包括在终端实时拍摄的输入图像上组合的计算机图形（CG）、文本等。根据AR技术，该技术可以通过更直观的方法为用户提供地理信息，因为它可以提供在视觉上与输入图像重叠的附加信息（例如表示感兴趣点（POI）的图形元素等），输入图像即用户正观看的现实世界的图形，是通过终端的摄像机模块输入的。

由于移动装置的屏幕，例如液晶显示器等的尺寸未大到足以显示巨量信息，通常利用常规AR技术仅为视野中包括的对象有限地显示附加信息，而不是为其中未包括的对象显示附加信息。

不过，根据现有的增强现实技术，如果用户打算搜索的对象不在终端的视野中，用户必须要改变终端的位移或地理位置，以便在用户终端的视野中包括对象。此外，用户可能感到不方便搜索对象，因为在改变终端的位移或地理位置时，用户无法得到针对对象位置或方向的任何指导。

因此，本发明的申请人想到开发一项技术，通过利用输入图像显示关于对象存在、位置和方向的信息，支持用户容易地识别未包括在终端视野中的对象，并有效获取关于对象的信息。

发明内容

因此，本发明的目的是解决上述所有问题。

本发明的另一个目的是，指定与通过终端输入的图像对应的终端的视野，并利用终端的位置、位移和视角的信息搜索其中未包括的对象，从而与显示的输入图像一起显示终端视野中未包括的对象中接近终端视野边界的对象信息。

根据本发明的一个方面，提供了一种方法，利用输入到终端的图像和与其相关的信息，以增强现实（AR）的形式提供终端视野中未包括的对象信息，包括如下步骤：(a)通过参照至少一条关于终端位置、位移和视角的信息，指定与所述输入图像对应的终端视野；(b)搜索所述终端的视野中不包括的对象；以及(c)以增强现实的形式与输入图像一起显示所搜索对象的引导信息；其中由顶点对应于所述终端的视见平截头体表示所述视野。

根据本发明的另一方面，提供了一种方法，利用输入到终端的图像和与其相关的信息，以增强现实（AR）的形式提供终端视野中未包括的对象信息，包括如下步骤：(a)通过参照至少一条关于终端位置、位移和视角的信息，指定与所述输入图像对应的终端视野；(b)搜索所述终端的视野中未包括的对象；以及(c)以增强现实的形式与输入图像一起显示所搜索对象的引导信息；其中所述引导信息包括被搜索对象名称的字符串和表示与视野位置相比其相对位置的图形元素中的至少一项。

根据本发明的另一方面，提供了一种终端，利用输入到其中的图像和与其相关的信息，以增强现实（AR）的形式提供其视野中未包括的对象信息，该终端包括：位置和位移测量部分，通过参考至少一条关于其位置、位移和视角的信息，指定与所述输入图像对应的其视野；用于搜索其视野中未包括的对象的信息搜索部分；以及用户接口部分，用于以增强现实的形式与输入图像一起显示所搜索对象的引导信息；其中由顶点对应于终端的视见平截头体表述所述视野。

根据本发明的另一方面，提供了一种终端，利用其中输入的图像和与其相关的信息，以增强现实（AR）的形式提供其视野中未包括的对象信息，该终端包括：位置和位移测量部分，通过参考至少一条关于其位置、位移和视角的信息，指定与所述输入图像对应的终端视野；用于搜索其视野中未包括的对象的信息搜索部分；以及用户接口部分，用于以增强现实的形式与输入图像一起显示所搜索对象的引导信息；其中所述引导信息包括被搜索对象名称的字符串和表示与视野位置相比其相对位置的图形元素中的至少一项。

附图说明

从结合附图给出的以下优选实施例描述，本发明的以上和其他目的和特征将变得显而易见，附图中：