[发明专利]用户界面设备和用户界面方法

说明书

技术领域

本发明涉及用户界面技术。

背景技术

作为启用关于计算机的用户输入的用户界面(人机界面)设备，已经提供了诸如鼠标、操纵杆、跟踪球、以及触控板的多种装置。近年来，还开发了通过检测身体活动(手势)响应于身体运动启用用户输入的用户界面设备，诸如数据手套、数据衣等。用户可以通过这样的用户界面设备利用直觉感觉操作计算机。

例如，在以下描述的PTL 1中，提出通过用户的手势促进操作输入的技术。通过所提出的技术，基于距离传感器的分辨率、显示器的三维显示性能、以及在深度方向上诸如用户的手的手指的指示点的测量距离，调节用于确定检测深度方向上的指示点的运动的敏感度的参数。然后，通过基于调节后的参数计算深度方向上的指示点的距离，识别通过用户的手势的操作输入。

[引用列表]

[专利文献]

[PTL 1]日本未审查专利申请公开No.2012-137989

发明内容

[技术问题]

然而，上述提出的方法仅假设对应于诸如手的手指的身体的特定部分(指示点，instruction point)的运动的用户输入，并且不假设对应于在定点操作中使用的用户的特定部位的形状(状态)的变化的用户输入，诸如，用手抓住物体的运动和通过手指握持物体的运动。

本发明考虑这些情况被做出，并且提供通过包括用户的特定部位的形状的变化的手势在直觉上和简单地操作计算机的用户界面技术。

[技术方案]

为了解决上述问题，本发明的多个方面采用以下结构。

第一方面涉及用户界面设备。根据第一方面的用户界面设备包括：位置获取单元，其按顺序地获取表示在定点操作中使用的用户的特定部位的至少一个代表性位置的定点位置；变化检测单元，其检测用户的特定部位的预定形状的变化开始和变化结束；位置存储单元，其存储由位置获取单元顺序获取的定点位置中的对应于由变化检测单元检测到的变化开始的时间的定点位置；计算单元，其指定由位置获取单元获取的定点位置中的对应于由变化检测单元检测到的变化结束的时间的定点位置，并且计算指定定点位置和存储在位置存储单元中的定点位置之间的差异；以及位置调节单元，其使用由计算单元计算的差异，调节由位置获取单元获取的定点位置。

第二方面涉及用户界面方法。在根据第二方面的用户界面方法中，至少一个计算机按顺序地获取表示在定点操作中使用的用户的特定部位的至少一个代表性位置的定点位置；检测用户的特定部位的预定形状的变化开始和变化结束；存储顺序获取的定点位置中的对应于所检测到的变化开始的时间的定点位置；指定顺序获取的定点位置中的对应于所检测到的变化结束的时间的定点位置；计算指定定点位置和所存储定点位置之间的差异；以及使用所计算的差异，调节顺序获取的定点位置。

注意，其它方面可以是使得至少一个计算机实现以上第一方面中的各自结构的程序或者记录这样的程序的计算机可读记录介质。记录介质包括非暂时性有形介质。

[有益效果]

根据上述各个方面，可以提供通过包括用户的特定部位的形状的变化的手势，在直觉上并且简单地操作计算机的用户界面技术。

附图说明

上述目标和其它目标、特征以及优点将从以下描述的优选示例性实施例和以下附图更加明显。

[图1]图1是概念性地示出定点位置的获得的视图。

[图2]图2是概念性地示出定点位置的获取的问题的视图。

[图3]图3是概念性地示出示例性实施例中的定点位置的调节的视图。

[图4]图4是概念性地示出第一示例性实施例中的三维用户界面设备(3D-UI设备)的硬件结构实例的视图。

[图5]图5是示出第一示例性实施例中的三维用户界面设备(3D-UI设备)的利用形式的实例的视图。

[图6]图6是示出HMD的外部结构的实例的视图。

[图7]图7是概念性地示出第一示例性实施例中的传感器侧设备的功能结构实例的视图。

[图8]图8是概念性地示出第一示例性实施例中的显示器侧设备的功能结构实例的视图。

[图9]图9是示出显示在HMD上的合成图像的实例的视图。

[图10]图10是示出第一示例性实施例中的三维用户界面设备(3D-UI设备)的操作实例的序列图。

[图11]图11是示出图10中所示的步骤(S106)的详情的流程图。

[图12]图12是概念性地示出第二示例性实施例中的三维用户界面设备(3D-UI设备)的功能结构实例的视图。