[发明专利]一种电子信息设备的操作方法及系统

说明书

技术领域

本发明涉及三维图像处理及图像映射技术领域，具体涉及一种电子信息设备的操作方法及系统。

背景技术

人观察2D/3D显示的系统界面，在不通过任何传感装置，也不接触主机的情况下，通过摄像头或者景深传感器，将人所处场景的2D/3D信息映射到显示屏上，在显示屏的镜像指示下，对系统进行准确的隔空操作。

类似的有非接触式显示系统，用户能通过将手指或指示器移向图像的所选择部分来与显示的图像交互，对显示区域内出现的人的手部进行动态监测和识别，对手部进行识别，使用者可以不接触任何物体而控制系统。

针对现有的非触摸屏操作系统，手在操作时不清楚自己手部处在显示屏的位置，只能通过手部的移动，去寻找要显示屏上要操作的目标（操作图标、软键盘按钮），这种操作模式用户不能精确的找到操作位置，给操作带来了一定困难。

发明内容

有鉴于此，本发明所要解决的技术问题是提供一种电子信息设备的操作方法及系统，操作者可看到自己手部或者肢体的操作位置，使得操作更加精确。

本发明实施例提供一种电子信息设备的操作方法，包括：

确定操作点在系统显示界面的坐标；

采集操作者肢体动作信息获得其空间坐标信息和图像数据，将所获得的图像数据以镜像形式通过显示屏输出；

计算肢体映射在显示屏中的镜像点坐标；

识别肢体动作并判断肢体镜像点与操作点是否对应？若对应，则系统进行该肢体动作响应操作，否则不响应。

本发明实施例提供的一种基于立体视觉的操作显示系统，包括：

操作点定位单元，确定操作点在系统显示界面的坐标；

操作信息采集单元，采集操作者肢体动作信息获得其空间坐标信息和图像数据，并输出所获得的图像数据；

坐标映射单元，计算肢体映射在显示屏中的镜像点坐标；

识别单元，识别肢体动作并判断肢体镜像点与操作点是否对应？若对应，则指示系统进行该肢体动作响应操作，否则不响应；

显示单元，用于显示包含操作者肢体图像信息的视频输出信号。

本发明基于镜像显示技术和机器视觉技术，将显示屏上图像坐标和人的肢体在空间中的坐标对应，在2D/3D显示情况下，使用户可以在显示屏上看到自己相对与屏幕的操作位置，从而实现准确的隔空操作。

本发明在2D/3D显示中，通过肢体动作对2D/3D显示的系统进行操作，将摄像头拍摄到的场景映射到显示屏上，使用户可以实时的看到自己手部和肢体所处的位置，当用户想操作时，可以根据肢体在显示屏的移动，来操作控制系统，而用户本身并不需要接触任何设备，但是能精确的，实时的控制系统。

本发明与这些专利的区别是：在2D/3D显示的技术下，利用机器视觉技术，实现了不通过任何输入设备，也不需要触摸到主机，且将摄像头或者景深传感器拍摄到图像映射到显示屏上，使用户面对显示器可以直接更直观的看清楚自己所处的环境，而现有技术虽然也是属于非接触式操作，但是用户在显示屏上不能看到自己手部或者肢体的操作位置，本发明在镜像指引下，对2D/3D显示的操作系统进行操作，更加精确，更加灵活的实现了人机交互，有益于用户的操作体验。

附图说明

图1 为本发明提供的非接触式操作系统的原理示意图；

图2 为本发明提供的一种电子信息设备的操作方法流程图；

图3 为本发明实施例提供的非接触式操作方法流程图；

图4 为本发明实施例中摄像头空间坐标系与镜像坐标系之间的关系示意图；

图5为本发明实施例中的显示界面为二维2D时的原理示意图；

图6为本发明实施例中的显示界面为三维3D时的原理示意图；

图7为本发明实施例中的3D显示光学原理示意图；

图8（a）和图8（b）为本发明实施例中的3D显示系统双目视觉距离传感器模型图；

图9为本发明提供的基于立体视觉的操作显示系统的架构示意图。

具体实施方式

鉴于现有技术中存在的不足，本发明提供一种电子信息设备的操作方法及操作显示系统，可在2D/3D显示系统中，通过肢体动作对2D/3D显示的系统进行操作，将摄像头或者景深传感器拍摄到的场景映射到显示屏上，使操作者可以实时的看到自己手部和肢体所处的位置，当需要操作时，可以根据肢体在显示屏的移动进行操作控制，而操作者本身并不需要接触任何设备，但是可以精确地，实时进行操作控制。

参照图1及图2，本发明一种电子信息设备的操作方法，包括如下步骤：