[发明专利]一种人机交互系统的控制方法

摘要

本发明公开了一种人机交互系统的控制方法。该方法包括获取多个标识物的图像，其中标识物上设置多个标识点，不同的标识物上设置的标识点具有不同形状，从图像中提取不同形状的标识点，根据标识点的形状对标识点进行分组以获取分组后的标识点形成的几何图形，通过比较当前帧图像的几何形状和前一帧图像对应的几何形状获取标识物的运动状态，根据运动状态输出对应的控制命令至人机交互系统。通过上述方式，本发明能够以较低成本以及相对简单的方式实现人机交互系统的控制。

主权项

一种人机交互系统的控制方法，其特征在于，所述方法包括：步骤1，获取多个标识物的图像，其中所述标识物上设置多个标识点，不同的所述标识物上设置的所述标识点具有不同形状；步骤2，从步骤1所述图像中提取不同形状的所述标识点；步骤3，根据步骤2所述标识点的形状对所述标识点进行分组以获取分组后的所述标识点形成的几何形状；步骤4，通过比较当前帧图像的所述几何形状和前一帧图像对应的所述几何形状获取所述标识物的运动状态；步骤5，根据所述运动状态输出对应的控制命令至人机交互系统；步骤2具体包括：21在所述图像中搜索光斑；22计算各所述光斑的光密度；23选择所述光密度在预定范围内的光斑作为所述标识点；步骤22所述光密度根据如下公式进行计算：M=4π*SL2;]]>其中，M为光斑的光密度，S为光斑的面积，L为光斑的周长；步骤3具体包括：31根据所述标识点的形状对所述标识点进行分组，其中，分组后的所述标识点具有相同的形状；32获取分组后的所述标识点形成的三角形，其中，所述三角形由第一标识点、第二标识点和第三标识点形成，所述第一标识点、第二标识点和第三标识点为按水平坐标的升序排列的标识点；步骤4具体包括：411获取当前帧图像的所述几何形状的平均水平坐标作为第一水平坐标，以及获取前一帧图像对应的所述几何形状的平均水平坐标作为第二水平坐标；412通过比较所述第一水平坐标和所述第二水平坐标确定所述标识物沿水平轴的移动；其中，所述几何形状的所述平均水平坐标为所述第一标识点、第二标识点和第三标识点的水平坐标的平均值；可以根据如下公式确定标识物沿水平轴的移动：Movement_hortizontal＝(q1x+q2x+q3x)/3‑(p1x+p2x+p3x)/3；其中，q1x、q2x和q3x为当前帧图像的第一标识点、第二标识点和第三标识点的水平坐标，p1x、p2x和p3x为前一帧图像的第一标识点、第二标识点和第三标识点的水平坐标；其中，当Movement_hortizontal为正值时，表示标识物沿水平轴向右移动，当Movement_hortizontal为负值时，表示标识物沿水平轴向左移动；421获取当前帧图像的所述几何形状的平均垂直坐标作为第一平均垂直坐标，以及获取前一帧图像对应的所述几何形状的平均垂直坐标作为第二平均垂直坐标；422通过比较所述第一平均垂直坐标和所述第二平均垂直坐标确定所述标识物沿垂直轴的移动；其中，所述几何形状的所述平均垂直坐标为所述第一标识点、第二标识点和第三标识点的垂直坐标的平均值；可以根据如下公式确定标识物沿垂直轴的移动：Movement_vertical＝(q1y+q2y+q3y)/3‑(p1y+p2y+p3y)/3；其中，q1y、q2y和q3y为当前帧图像的第一标识点、第二标识点和第三标识点的垂直坐标，p1y、p2y和p3y为前一帧图像的第一标识点、第二标识点和第三标识点的垂直坐标；其中，当Movement_vertical为正值时，表示标识物沿垂直轴向上移动，当Movement_vertical为负值时，表示标识物沿垂直轴向下移动；431获取当前帧图像的所述几何形状的面积作为第一面积，以及获取前一帧图像对应的所述几何形状的面积作为第二面积；432通过比较所述第一面积和所述第二面积确定所述标识物沿缩放轴的移动；根据如下公式确定标识物沿缩放轴的移动：Movement_zoom＝qarea‑parea；其中，qarea为当前帧图像的几何形状的面积，parea为前一帧图像的几何形状的面积；其中，当Movement_zoom为正值时，表示标识物沿缩放轴放大移动，Movement_zoom为负值时，表示标识物沿缩放轴缩小移动；另外，几何形状的面积marea可以根据如下公式进行计算：ma=(m1x-m2x)2+(m1y-m2y)2;]]>mb=(m3x-m2x)2+(m3y-m2y)2;]]>mc=(m1x-m3x)2+(m1y-m3y)2;]]> ms＝0.5*(ma+mb+mc)； marea＝ms*(ms‑ma)*(ms‑mb)*(ms‑mc)；其中，m为当前帧图像的几何形状q或前一帧图像的几何形状p，ma、mb和mc为几何形状的三条边，m1x、m2x和m3x为几何形状的第一标识点、第二标识点和第三标识点的水平坐标，m1y、m2y和m3y为几何形状的第一标识点、第二标识点和第三标识点的垂直坐标；441获取当前帧图像的所述三角形中以所述第二标识点为顶点的角度作为第一角度，以及获取前一帧图像的所述三角形中以所述第二标识点为顶点的角度作为第二角度；442通过比较所述第一角度和所述第二角度确定所述标识物绕水平轴的转动；根据如下公式确定标识物沿水平轴的转动：Movement_pitch＝q2angle‑p2angle；其中，q2angle为当前帧图像的三角形以第二标识点为顶点的角度，p2angle为前一帧图像的三角形以第二标识点为顶点的角度；其中，当Movement_pitch为正值时，表示标识物绕水平轴向右转动，当Movement_pitch为负值时，表示运动状态为沿水平轴向左转动；另外，三角形以第二标识点为顶点的角度m2angle根据如下公式进行计算：ma=(m1x-m2x)2+(m1y-m2y)2;]]>mb=(m3x-m2x)2+(m3y-m2y)2;]]>mc=(m1x-m3x)2+(m1y-m3y)2;]]>m2angle＝arcos((ma)2+(mb)2‑(mc)2)/(2*ma*mb))；其中，m为当前帧图像的几何形状q或前一帧图像的几何形状p，ma、mb和mc为几何形状的三条边，m1x、m2x和m3x为几何形状的第一标识点、第二标识点和第三标识点的水平坐标，m1y、m2y和m3y为几何形状的第一标识点、第二标识点和第三标识点的垂直坐标；451获取当前帧图像的所述三角形中以所述第一标识点或所述第三标识点为顶点的角度作为第一角度，以及获取前一帧图像的所述三角形中以所述第一标识点或所述第三标识点为顶点的角度作为第二角度；452通过比较所述第一角度和所述第二角度确定所述标识物绕垂直轴的转动；具体来说，以第一标识点为顶点的角度为例来说，根据如下公式确定标识物沿垂直轴的转动：Movement_yaw＝q1angle‑p1angle；其中，q1angle为当前帧图像的三角形以第一标识点为顶点的角度，p1angle为前一帧图像的三角形以第一标识点为顶点的角度；其中，当Movement_yaw为正值时，表示标识物绕垂直轴向右转动，当Movement_yaw为负值时，表示标识物绕垂直轴向左转动；具体来说，以第三标识点为顶点的角度为例来说，根据如下公式确定标识物沿垂直轴的转动：Movement_yaw＝q3angle‑p3angle；其中，q3angle为当前帧图像的三角形以第三标识点为顶点的角度，p3angle为前一帧图像的三角形以第三标识点为顶点的角度；其中，当Movement_yaw为正值时，表示标识物绕垂直轴向左转动，当Movement_yaw为负值时，表示标识物绕垂直轴向右转动；另外，三角形以第一标识点为顶点的角度m1angle和三角形以第三标识点为顶点的角度m3angle根据如下公式进行计算：ma=(m1x-m2x)2+(m1y-m2y)2;]]>mb=(m3x-m2x)2+(m3y-m2y)2;]]>mc=(m1x-m3x)2+(m1y-m3y)2;]]> m1angle＝arcos((ma)2+(mc)2‑(mb)2)/(2*ma*mc))； m3angle＝arcos((mc)2+(mb)2‑(ma)2)/(2*mb*mc))；其中，m为当前帧图像的几何形状q或前一帧图像的几何形状p，ma、mb和mc为几何形状的三条边，m1x、m2x和m3x为几何形状的第一标识点、第二标识点和第三标识点的水平坐标，m1y、m2y和m3y为几何形状的第一标识点、第二标识点和第三标识点的垂直坐标；461获取当前帧图像的所述第一标识点和所述第三标识点的垂直坐标之差作为第一差值，以及获取前一帧图像对应的所述第一标识点和所述第三标识点的垂直坐标之差作为第二差值；462通过比较所述第一差值和所述第二差值确定所述标识物绕缩放轴的转动；根据如下公式确定标识物沿缩放轴的转动：Movement_roll＝(q1y‑q3y)‑(p1y‑p3y)；其中，q1y和q3y为当前帧图像的第一标识点和第三标识点的垂直坐标，p1y和p3y为前一帧图像的第一标识点和第三标识点的垂直坐标；其中，当Movement_roll为正值时，表示标识物绕缩放轴向右转动，Movement_roll为负值时，表示标识物绕缩放轴向左转动。