[发明专利]按键显示操作方法、装置及手机控制系统

说明书

本发明公开了一种按键显示操作方法、装置及手机控制系统，在检测到触发事件时生成鼠标移动指令，显示鼠标，然后判断是否成功调用系统API，若是，显示全屏悬浮框，全屏悬浮框用于实时监测鼠标移动的位置，当全屏悬浮框检测到鼠标移动指令时，基于鼠标移动指令，确定鼠标的移动方向和移动距离，基于鼠标的移动方向和移动距离，将鼠标进行移动和点击操作；若否，发送截图指令，获取截图内容对应的图像元素，根据图像元素确定鼠标移动的位置和点击操作。驾驶者可以通过简单的按键点击操作，实现手机微信读取信息、微信回复信息、打开导航、打开音乐，准确率高，操作简单，减少驾驶者因手机操作导致分神而引起的安全隐患，具有较大的经济和社会价值。

技术领域

本发明涉及车载显示领域，特别是涉及一种按键显示操作方法、装置及手机控制系统。

背景技术

移动互联网时代，智能手机快速普及，其性能也是越来越强大，运行速度和效率优于一般车载导航。虽然，现有一些车载导航也带有语音助手，可以语音处理导航、音乐等功能。但是，在公知的领域，语音助手需要使用特定的语言(如标准普通话、英语)等，对说话人的语速、发音音准等都有着较高的要求，语音识别功能往往识别率较低或容易出现误识别的情况，在这种情况下容易使得驾驶者分神，导致安全隐患。而且，一般车载导航并不能应对微信回复，而如今生活中手机微信的使用率非常高，在驾驶过程中，如果驾驶者低头去用手操作手机发微信信息，视线完全离开前方路面，容易对路上一些突发状况不能及时作出判断，有非常大的安全隐患。

发明内容

基于此，有必要针对现有技术问题，提供一种按键显示操作方法、装置及手机控制系统，提高驾驶的安全性。

为解决现有技术问题，本发明第一方面提供了一种按键显示操作方法，所述方法应用于手机显示屏，所述方法包括：

在检测到触发事件时生成鼠标移动指令，显示鼠标；

判断是否成功调用系统API，

若是，显示全屏悬浮框，所述全屏悬浮框用于实时监测鼠标移动的位置，当所述全屏悬浮框检测到所述鼠标移动指令时，基于所述鼠标移动指令，确定所述鼠标的移动方向和移动距离，基于所述鼠标的移动方向和移动距离，将所述鼠标进行移动和点击操作；

若否，发送截图指令，获取截图内容对应的图像元素，根据所述图像元素确定鼠标移动的位置和点击操作。

其中的一个实施例中，所述基于所述鼠标移动指令，确定所述鼠标的移动方向和移动距离，包括：

基于所述鼠标移动指令，确定所述鼠标的移动方向；

确定所述鼠标移动指令作用于移动终端上的次数，确定所述鼠标的移动距离；

确定所述鼠标移动指令作用于移动终端上的持续时间，确定所述鼠标的持续移动距离。

其中的一个实施例中，所述确定所述鼠标的移动方向和移动距离后，还包括：

判断鼠标是否到达目标位置；

若否，重新执行基于所述鼠标移动指令，确定所述鼠标的移动方向和移动距离；

若是，关闭全屏悬浮框，结束鼠标移动。

其中的一个实施例中，所述全屏悬浮框与手机的屏幕显示范围一致。

其中的一个实施例中，所述图像元素包括形状元素、颜色元素、字符元素和预设模板元素。

其中的一个实施例中，所述获取截图内容对应的图像元素包括：

全屏内容原始图像获取单元，用于当检测到所述截图指令时，获取手机的屏幕全屏内容的原始图像；

图像元素判别单元，用于识别图像内容的形状元素、颜色元素、字符元素和预设模版元素；