[发明专利]一种基于面部微表情的鼠标控制系统

说明书

本发明公开了一种基于面部微表情的鼠标控制系统，所述鼠标控制系统由摄像头、处理器及KVM装置组成，所述KVM装置具有鼠标和屏幕，所述摄像头捕捉操作者的面部微表情，所述处理器根据所述摄像头捕捉的面部微表情判断所述操作者所观察的屏幕的位置，并将所述鼠标路由到所述操作者所观察的屏幕的位置。本发明通过KVM装置和操作者进行交互，摄像头观察操作者的面部微表情，处理器识别当前鼠标应该路由到哪个目标主机（屏幕的位置），从而实现鼠标数据的直接透传，实现较为复杂多样操作系统的目标主机情况下，简易部署，提高用户使用体验，构建较复杂大型的坐席终端。

技术领域

本发明属于图像处理和人机交互的鼠标控制领，具体涉及一种基于面部微表情的鼠标控制系统。

背景技术

现今的KVM的一机多屏的实现方式，都是经过在KMV输出端，对鼠标的位置进行实时判断，以此判断鼠标是否跨过了单个屏幕的边界。这种方式的弊端在于，目标计算机上的鼠标未必和KVM输出端计数的位置完全一致，表现在A、目标主机开启鼠标加速（高精度）时，其移动位移不只是和距离有关，还和移动速度有关，难以拟合，需要关闭该功能，但影响系统功能，且有违人的使用习惯；B、在多头显卡应用中，有的系统采用的都是相对坐标，有的是相对坐标和绝对坐标组合；C、目标计算机计数原点多样。有的左小角为屏幕1起点，有的左上角为屏幕1起点。因此，现阶段KVM要做到一个席位上多个屏幕，每个屏幕接管不同计算机，而实现如多头显卡一样的跨屏效果，除了输出节点需要随时计算鼠标的位置进行拟合外，还需要关闭目标系统的鼠标加速，而且还需要针对不同的系统做不同的适配，限制了KVM的应用。

本发明旨在解决如上问题，以便KVM无需关心目标计算机系统是否开启鼠标加速，是左下角第一屏幕还是右上角第一屏幕，是相对坐标还是绝对坐标，以及无需拟合鼠标位置，而是通过KVM装置和操作者进行交互，摄像头观察操作者的面部微表情，处理器识别当前鼠标应该路由到哪个目标主机（屏幕的位置），从而实现鼠标数据的直接透传，实现较为复杂多样操作系统的目标主机情况下，简易部署，提高用户使用体验，构建较复杂大型的坐席终端。

发明内容

针对现有技术中存在的问题，本发明通过KVM装置和操作者进行交互，摄像头观察操作者的面部微表情，处理器识别当前鼠标应该路由到哪个目标主机（屏幕的位置），从而实现鼠标数据的直接透传，实现较为复杂多样操作系统的目标主机情况下，简易部署，提高用户使用体验，构建较复杂大型的坐席终端。

为了实现上述目的，本发明实施例提供了一种基于面部微表情的鼠标控制系统，其由摄像头、处理器及KVM装置组成，所述KVM装置具有鼠标和屏幕，所述摄像头捕捉操作者的面部微表情，所述处理器根据所述摄像头捕捉的面部微表情判断所述操作者所观察的屏幕的位置，并将所述鼠标路由到所述操作者所观察的屏幕的位置。

所述处理器根据所述摄像头捕捉的面部眼球的偏转来判断所述操作者所观察的屏幕的位置，并将所述鼠标路由到所述操作者所观察的屏幕的位置。

所述处理器也可以根据所述摄像头捕捉的面部平面角度的变化来判断所述操作者所观察的屏幕的位置，并将所述鼠标路由到所述操作者所观察的屏幕的位置。

进一步的，所述处理器根据所述摄像头捕捉到的所述操作者的眼睛眨动的次数来控制所述鼠标操作，实现所述鼠标的功能。

当所述摄像头捕捉到所述操作者的眼睛眨动1次时，所述处理器控制所述鼠标实现单击功能。

当所述摄像头捕捉到所述操作者的眼睛眨动2次时，所述处理器控制所述鼠标实现双击功能。

当所述摄像头捕捉到所述操作者眼睛眨动大于等于3次时，所述处理器不会控制所述鼠标实现功能。

进一步的，所述处理器根据所述摄像头捕捉到的所述操作者左眼或右眼的眨动来控制所述鼠标操作，实现所述鼠标的功能。

当所述摄像头捕捉到所述操作者的左眼眨动时，所述处理器控制所述鼠标实现左击功能。