[发明专利]一种车机屏幕控制方法、装置、介质及电子设备

说明书

本发明公开了一种车机屏幕控制方法、装置、介质及电子设备，方法包括：获取已投屏至车机屏幕的应用程序的图像；识别所述应用程序中的可点击元素；根据接收到的控制指令生成相应的点击序列，所述点击序列包括至少一个可点击元素；按序执行所述点击序列的点击操作，以控制所述车机屏幕展示与所述控制指令对应的目标界面。通过智能识别车机屏幕上应用程序包含的可点击元素，并在接收到控制指令时生成相应的点击序列来模拟点击相应的元素实现车机屏幕的控制，用户无需伸手触摸车机屏幕且APP厂家也无需在车机端进行额外的编程适配操作，确保车机屏幕操控安全性的同时也提高了投屏互联中应用程序的适配性。

技术领域

本发明涉及汽车技术领域，尤其涉及一种车机屏幕控制方法、装置、介质及电子设备。

背景技术

车机指的是安装在汽车里面的车载信息娱乐产品的简称，车机在功能上能够实现人与车，车与外界(车与车)的信息通讯。

目前车机从早期的CD、DVD导航，已经向智能化、信息化发展，用户除了能使用车机本身具有的例如收音机、音视频播放、导航等功能以外，还可以通过移动终端与车机之间的投屏互联实现更加丰富的功能，即将移动终端上的APP投屏至车机上进行操控。

然而，在对投屏至车机上的APP进行触摸操控时，由于车机的摆放位置使得操作时往往需要探身伸手才能进行触摸，这在开车的时候显得尤为不便，且很容易由于颠簸、视线需要看前方等因素，导致点击屏幕不准，更加影响驾驶的安全性。同时由于传统的触摸操控还要求APP厂家针对不同的车型与车机屏幕分辨率单独适配一个车机版本的APP，使得目前的车机屏幕控制方式安全性与适配性均较低。

发明内容

鉴于上述现有技术的不足，本发明的目的在于提供一种车机屏幕控制方法、装置、介质及电子设备，旨在提高车机屏幕控制的安全性和适配性。

本发明的技术方案如下：

一种车机屏幕控制方法，包括：

获取已投屏至车机屏幕的应用程序的图像；

识别所述应用程序中的可点击元素；

根据接收到的控制指令生成相应的点击序列，所述点击序列包括至少一个可点击元素；

按序执行所述点击序列的点击操作，以控制所述车机屏幕展示与所述控制指令对应的目标界面。

在一个实施例中，所述识别所述应用程序中的可点击元素，包括：

获取所述应用程序中的界面；

通过预先训练完成的识别模型对所述界面进行元素识别处理；

根据识别结果确认所述应用程序中的可点击元素。

在一个实施例中，所述根据识别结果确认所述应用程序中的可点击元素，包括：

将所述识别结果中的每个输出元素确认为所述应用程序中的可点击元素。

在一个实施例中，所述根据识别结果确认所述应用程序中的可点击元素，包括：

获取所述识别结果中的输出元素；

根据预设合并规则对所述输出元素进行合并处理，将生成的合并元素确认为所述应用程序中的可点击元素。

在一个实施例中，所述根据接收到的控制指令生成相应的点击序列，所述点击序列包括至少一个可点击元素，包括：

获取用户输入的控制指令，所述控制指令为按键指令、遥控指令、语音指令中的一种或多种。

在一个实施例中，所述根据接收到的控制指令生成相应的点击序列，所述点击序列包括至少一个可点击元素，包括：

对接收到的控制指令进行解析，获取所述控制指令中的目标操作；