[发明专利]一种电子设备图形用户界面交互方法、装置和终端设备

说明书

本申请公开了一种电子设备图形用户界面GUI交互方法、装置和终端设备，所述方法包括：获取第一文字串，所述第一文字串是由用户语音转换生成；解析所述第一文字串得到至少一个关键词；在所述电子设备当前显示的界面对应的控制事件集合中查找与所述至少一个关键词相匹配的控制事件名称，所述控制事件集合包括所述当前显示界面中所能产生的控制事件的名称与关键词的对应关系，确定所述控制事件名称对应的控制事件，并执行所述控制事件。本方法实现了基于语音驱动GUI交互过程，达到了用户在双手无法释放情况下仍然能够与终端电子设备进行GUI交互的有益效果。

技术领域

本申请涉及计算机技术图形用户界面GUI交互领域，尤其涉及一种电子设备GUI交互方法、装置和终端设备。

背景技术

图形用户界面(graphical user interface，GUI)又称图形用户接口，是指采用图形方式显示的计算机操作用户界面。进一步地，GUI是一种人与计算机通信的界面显示方式，允许用户使用鼠标等输入设备操纵屏幕上的图标或菜单选项，以选择命令、调用文件、启动程序或执行其它一些日常任务。

与通过键盘输入文本或字符命令来完成例行任务的字符界面相比，图形用户界面有许多优点，比如嵌入式GUI具有：轻型、占用资源少、高性能、高可靠性、便于移植、可配置等特点。GUI的应用极大地方便了普通用户的使用，用户不再需要死记硬背大量的命令，取而代之的是可以通过窗口、菜单、按键等方式来方便地进行操作。

目前，用户在终端上进行GUI操作方法，主要是采用按键、触控输入的方式来驱动GUI交互，但是在一些情况下，用户双手无法按键或触控输入终端，比如用户在开车或骑行、手机投屏模式等，无法与终端进行GUI交互，从而影响用户体验。

另外，对于不熟悉终端使用方法的用户，在终端上进行GUI交互操作也存在局限性，比如用户在一些用户界面(user interface，UI)上进行发信息、播放视频、拍照、查找文件、开启手电筒等功能的操作会变得困难。

发明内容

本申请实施例提供了一种电子设备GUI交互方法，用于解决用户在双手无法释放情况下无法与终端电子设备进行GUI交互的问题，并且，本方法仅通过语音输入就能够实现驱动电子设备进行GUI交互的操控，无需用户再学习使用方法。

第一方面，本申请实施例提供了一种电子设备图形用户界面GUI交互方法，所述方法可以应用于电子设备，比如手机、平板、笔记本等，具体地所述方法包括：获取第一文字串，所述第一文字串是由用户语音转换生成，解析所述第一文字串得到至少一个关键词；在所述电子设备当前显示的界面对应的控制事件集合中查找与所述至少一个关键词相匹配的控制事件名称，所述控制事件集合包括所述当前显示界面中所能产生的控制事件的名称与关键词的对应关系；确定所述控制事件名称对应的控制事件，并执行所述控制事件，并完成所述控制事件的相关进程。

本方面提供的方法，通过对用户输入的语音进行文字转化处理，词汇筛选和匹配处理，从而实现从用户输入语音到确定并执行关联的控制事件的过程，达到了仅靠用户语音就可以与终端电子设备进行GUI交互的有益效果，避免用户再对GUI交互进行操作和学习，本方法提高了用户体验。

结合第一方面，在第一方面的一种实现方式中，所述查找相匹配的控制事件名称之前，还包括：根据所述电子设备当前显示的界面确定当前界面的界面标识；根据所述界面标识确定与所述界面标识对应的控制事件集合；其中，所述当前显示的界面包括至少一个应用，每个所述应用对应一个应用标识，所述当前界面的界面标识关联当前显示的界面的所有应用标识，且用于唯一标识所述当前显示的界面，并且每个界面都对应一个控制事件集合。本方面通过电子设备当前界面与控制事件集合的对应关系，可以唯一确定一个控制事件集合，从而能够为快速查找和确定控制事件做准备。