[发明专利]一种电子信息设备的操作方法及系统

权利要求书

1.一种电子信息设备的操作方法，其特征在于，包括：

确定操作点在系统显示界面的坐标；

采集操作者肢体动作信息获得其空间坐标信息和图像数据，将所获得的图像数据以镜像形式通过显示屏输出；

计算肢体映射在显示屏中的镜像点坐标；

识别肢体动作并判断肢体镜像点与操作点是否对应？若对应，则系统进行该肢体动作响应操作，否则不响应。

2.如权利要求1所述的操作方法，其特征在于，所述确定操作点在系统显示界面的坐标，具体包括：

若系统的显示界面为二维2D，则以显示器的左上角为空间原点，显示界面为XOY二维坐标平面，得到系统操作界面中操作点在显示器二维平面坐标D(x,y)；或

若系统的显示界面为三维3D，则以显示器的左上角为空间原点，显示界面为XYZ三维立体图像，显示器为XOY面，垂直显示器方向为Z轴，得到系统操作界面中操作点三维空间中的坐标D(x,y,z)。

3.如权利要求1所述的操作方法，其特征在于，所述采集操作者肢体动作信息获得其空间坐标信息和图像数据，将所获得的图像数据以镜像形式通过显示屏输出，具体包括：

当操作者移动肢体时，计算出肢体运动时的空间坐标，不断更新肢体在显示界面中的映射坐标，在显示界面实时显示肢体的位置。

4.如权利要求1所述的操作方法，其特征在于，所述计算肢体映射在显示屏中的镜像坐标，具体包括：

若系统的显示界面为二维2D，摄像头采集到的图像映射到显示屏上，以平面镜像形式呈现，以显示器的左上角为空间原点，显示界面为坐标平面，计算手或肢体相对于原点的位置，实时的得到手或肢体坐标P(x,y)；

若系统的显示界面为三维3D，以立体镜像形式呈现，基于所确定的操作点坐标D(x,y,z)和操作时肢体相对于摄像头的空间坐标P(x,y,z)，根据摄像头和显示界面的位置关系，将P点转换到和D点相同的坐标系下，得到在同一坐标系下的肢体镜像点坐标P^’(x,y,z)。

5.如权利要求1所述的操作方法，其特征在于，所述识别肢体动作并判断肢体镜像点与操作点是否对应，具体包括：

若系统的显示界面为二维2D，则检测手部或肢体的位置映射在显示界面上的２Ｄ坐标和显示界面上操作点坐标是否重合，若重合，则判定肢体镜像坐标与操作点坐标对应；

若系统的显示界面为三维3D，操作时手部或肢体动作需要触碰到在三维空间某一位置的操作点，若操作点坐标D和镜像点坐标P^’重合，则判定肢体镜像坐标与操作点坐标对应。

6.一种基于立体视觉的操作显示系统，其特征在于，包括：

操作点定位单元，确定操作点在系统显示界面的坐标；

操作信息采集单元，采集操作者肢体动作信息获得其空间坐标信息和图像数据，并输出所获得的图像数据；

坐标映射单元，计算肢体映射在显示屏中的镜像点坐标；

显示单元，用于显示包含操作者肢体图像信息的视频输出信号；

识别单元，识别肢体动作并判断肢体镜像点与操作点是否对应？若对应，则指示系统进行该肢体动作响应操作，否则不响应。

7.权利要求6所述的操作显示系统，其特征在于，所述坐标映射单元包括：

三维坐标计算模块，用于计算操作者手部的镜像点三维3D坐标；基于所确定的操作点坐标D(x,y,z)和操作时肢体相对于摄像头的空间坐标P(x,y,z)，根据摄像头和显示界面的位置关系，将P点转换到和D点相同的坐标系下，得到在同一坐标系下的镜像点坐标P^’(x,y,z)。

8.如权利要求6所述的操作显示系统，其特征在于，所述识别单元，具体包括：

三维坐标检测模块，用于检测比较操作点坐标D和镜像点坐标P^’重合是否重合；

若系统的显示界面为三维3D，操作时手部或肢体动作需要触碰到在三维空间某一位置的操作点，若操作点坐标D和镜像点坐标P^’重合，则判定肢体镜像坐标与操作点坐标对应。