[发明专利]一种界面的操作方法、装置、电子设备及可读存储介质

说明书

本申请涉及信息处理技术领域，尤其涉及一种界面的操作方法、装置、电子设备及可读存储介质。本申请在接收用户发出的语音指令时，对当前的屏幕界面进行截屏，并从截屏图片中确定是否存在与语音指令相匹配的目标界面控件，若存在目标界面控件，控制目标界面控件执行语音指令对应的第一操作；若不存在目标界面控件，根据语音指令中的语音信息，确定控制屏幕界面的第二操作，并控制屏幕界面执行第二操作。这样，通过截屏图片和语音指令，对于电视终端中安装的任何应用程序都可以通过语音指令来进行控制，在省去了对应用程序的适配工作量的同时，还可以提升语音识别的准确率。

技术领域

本申请涉及信息处理技术领域，尤其涉及一种界面的操作方法、装置、电子设备及可读存储介质。

背景技术

随着科学进步和时代的发展，电视终端具有的功能越来越多，其中，带有语音识别功能的电视终端，由于用户通过语音指令便可以实现对其进行操控，解放了用户的双手，而深受广大用户的欢迎。

通常，电视终端在投放市场前，需要事先对电视终端上配置的应用程序进行适配工作，这样，用户才可以实现对配置的应用程序进行语音控制，但是，对于用户后期自行安装的应用程序，由于没有进行适配，将无法通过语音指令进行控制，而适配过程繁琐，用户很难自行操作。

发明内容

有鉴于此，本申请实施例的目的在于提供一种界面的操作方法及装置，可以省去对第三方应用程序的适配工作量的同时，还可以提升语音识别的准确率。

主要包括以下几个方面：

第一方面，本申请实施例提供一种界面的操作方法，所述界面的操作方法包括：

在接收用户发出的语音指令时，对当前的屏幕界面进行截屏，得到截屏图片；

确定所述截屏图片中是否存在与所述语音指令相匹配的目标界面控件；

若存在，控制所述目标界面控件执行所述语音指令对应的第一操作；

若不存在，根据所述语音指令中的语音信息，确定控制所述屏幕界面的第二操作，并控制所述屏幕界面执行所述第二操作。

在一种可能的实施方式中，根据以下步骤确定所述截屏图片中是否存在与所述语音指令相匹配的目标界面控件：

从所述截屏图片中，识别出至少一个候选界面控件；

判断所述至少一个候选界面控件中，是否存在与所述语音指令相匹配的界面控件；

若存在，则将该界面控件确定为所述目标界面控件。

在一种可能的实施方式中，所述根据所述语音指令中的语音信息，确定控制所述屏幕界面的第二操作，包括：

将所述语音信息与语句库中存储的语句信息进行匹配；所述语句库中存储有多个语句信息和每个语句信息对应的操作；

若所述语句库中存在与所述语音信息匹配的语句信息，则获取该语句信息对应的操作，并将该操作确定为控制所述屏幕界面的第二操作。

在一种可能的实施方式中，在所述将所述语音信息与语句库中存储的语句信息进行匹配之后，所述操作方法还包括：

若所述语句库中不存在与所述语音信息匹配的语句信息，则从所述语音信息中提取出动词；

基于所述动词和所述语音指令，确定控制所述屏幕界面的第二操作。

在一种可能的实施方式中，所述基于所述动词和所述语音指令，确定控制所述屏幕界面的第二操作，包括：

从所述语句库中，确定包含所述动词的至少一个语句信息；

获取所述至少一个语句信息中每个语句信息对应的操作；