[发明专利]人机交互操作的触发控制方法和装置

说明书

技术领域

本申请涉及计算机人机交互技术领域，尤其涉及一种人机交互操作的触发控制方法和装置。

背景技术

人机交互技术（Human-Computer Interaction Techniques）是指通过计算机输入、输出设备，以有效的方式实现人与计算机对话的技术。该技术包括：机器通过输出或显示设备给人提供大量有关信息及提示请示等，人通过输入设备给机器输入有关信息、提示请示及操作指令等，人通过输入设备给机器输入有关信息，回答问题等。人机交互技术是计算机用户界面设计中的重要内容之一。

目前的人机交互技术中，当人通过输入设备向计算机输入有关信息时，通常需要用手来操作。例如所述输入设备可以是键盘、鼠标或触摸屏等，人使用键盘输入相关的指令信息，则计算机可以响应该指令信息并做出对应的操作，人也可以使用鼠标点击计算机界面上的相关按钮来完成对应指令的输入，计算机则可以响应该指令并做出对应的操作。例如人用鼠标点击“关闭”按钮，则计算机会关闭该“关闭”按钮对应的窗口等。

上述人机交互方式虽然目前已经被广泛接受，但是，对于手指有残疾的残障人士来讲，现有的这种用手来操作向计算机输入信息和指令的技术显然是不适合的，不能实现非接触的人机交互操作。虽然目前也出现了直接用手势手型等进行非接触式人机交互输入的技术方案，但是这种技术方案还是需要用手来做出相应的动作，对残障人士来讲还是不方便的。

发明内容

有鉴于此，本发明的主要目的在于提供一种人机交互操作的触发控制方法和装置，以方便残障人士通过非接触的方式触发机器操作。

本发明的技术方案是这样实现的：

一种人机交互操作的触发控制方法，包括：

获取摄像装置拍摄的摄像画面，在显示屏上以虚化方式显示所述摄像画面；

检测所述摄像画面的帧间差，根据所述帧间差识别指定轮廓，并计算所识别出的指定轮廓在显示屏上的位置；

实时判断该指定轮廓在显示屏上的位置与显示屏上所显示的指定区域是否相交，如果相交，则触发该指定区域对应的操作。

一种人机交互操作的触发控制装置，该装置包括：

第一模块，用于获取摄像装置拍摄的摄像画面，在显示屏上以虚化方式显示所述摄像画面；

第二模块，用于检测所述摄像画面的帧间差，根据所述帧间差识别指定轮廓，并计算所识别出的指定轮廓在显示屏上的位置；

第三模块，用于实时判断该指定轮廓在显示屏上的位置与显示屏上所显示的指定区域是否相交，如果相交，则触发该指定区域对应的操作。

与现有技术相比，本发明通过获取摄像装置拍摄的摄像画面，并在显示屏上以虚化方式，例如半透明方式，显示所述摄像画面，从而使摄像画面和显示屏上显示的其它界面相重叠，并且可以检测出摄像画面上的指定轮廓（例如人的眼睛、人的嘴巴等），用户可以移动身体来控制所述摄像画面中指定轮廓的移动，当该指定轮廓与显示屏上所显示的指定区域（例如可以是一种媒介信息的显示区域，或者是指定指令区如按钮、链接等）相交时，则触发该指定区域对应的操作。因此本发明可以实现不必用手来触发人机之间的交互操作，方便残障人士通过非接触的方式触发机器操作。

附图说明

图1为本发明所述人机交互操作的触发控制方法的一种执行流程图；

图2a为在显示屏上所显示的指定区域为指定媒介信息的第一种机器界面示意图；

图2b为在显示屏上所显示的指定区域为指定媒介信息的第二种机器界面示意图；

图3a为在显示屏上所显示的指定区域为指定指令区的第一种机器界面示意图；

图3b为在显示屏上所显示的指定区域为指定指令区的第二种机器界面示意图；

图4为本发明所述人机交互操作的触发控制装置的一种组成示意图。

具体实施方式

下面结合附图及具体实施例对本发明再作进一步详细的说明

图1为本发明所述人机交互操作的触发控制方法的一种执行流程图。参见图1所示，该方法主要包括：

101、获取摄像装置拍摄的摄像画面，在显示屏上以虚化方式显示所述摄像画面。

所述虚化方式可以是指定的具体显示方式，例如在显示屏上以半透明方式显示所述摄像画面；或者可以将所述摄像画面转化为动画轮廓画面（例如简单线条轮廓的动画画面），该动画轮廓画面可以叠加到显示屏原有界面之上，用户既可以看到显示屏原有界面又可以看到该动画轮廓画面，从而方便用户移动摄像画面以进行后续操作。下面实施例中，以在显示屏上以半透明方式显示所述摄像画面为例进行说明。