[发明专利]移动终端人机交互方法及系统

说明书

本发明提供了一种移动终端人机交互方法及系统。所述方法包括：获取动作数据及动作判断模块；对所述动作数据进行规范化处理，生成规范化动作数据；利用所述动作判断模型对所述规范化动作数据进行计算，确定所述规范化动作数据对应的动作标识；根据所述动作标识判断是否存在后续动作；若是，根据所述动作标识确定对应的动作类型；根据所述动作类型执行对应的动作，并生成执行结果。本发明通过对传感器数据进行深度学习的手势识别方法来进行人机交互，用户可以单手完成动作，对于常用操作，可以非常方便进入，打破传统的树形页面层级限制，实现操作方便、安全且使用简单的移动端手势识别人机交互。

技术领域

本发明涉及互联网移动技术领域，尤指一种移动终端人机交互方法及系统。

背景技术

近几年，随着移动互联网的快速发展，移动终端设备快速普及，在移动终端上进行人机交互逐渐成为人们日常生活中的重要组成部分。传统的移动终端人机交互方式屏幕触摸，需要人去适应机器。而现如今移动设备屏幕尺寸日益增大，导致屏幕上的一些触摸操作无法单手完成，需要双手共同操作；另一方面，一些移动应用的框架使用树形设计不够扁平，一些常用的操作需要经过好几个页面跳转才能进入，或者当用户进入层级较深的叶子页面后，需要进入另外一个叶子页面，受所述树形框架设计的影响，需要逐层返回到首页，然后通过指定的操作来完成。用户容易误操作影响用户体验，另外大量的页面进入/退出操作浪费系统处理资源，处理效率低。

发明内容

为了解决目前移动终端人机交互存在的操作复杂、浪费系统资源及处理效率低等问题，本发明实施例提供一种移动终端人机交互方法，所述方法包括：

获取动作数据及动作判断模块；

对所述动作数据进行规范化处理，生成规范化动作数据；

利用所述动作判断模型对所述规范化动作数据进行计算，确定所述规范化动作数据对应的动作标识；

根据所述动作标识判断是否存在后续动作；若是，根据所述动作标识确定对应的动作类型；根据所述动作类型执行对应的动作，并生成执行结果。

可选的，在本发明一实施例中，所述方法还包括：获取并存储训练动作数据及所述训练动作数据对应的训练动作标识；对所述训练动作数据进行规范化处理，生成规范化训练动作数据；将所述规范化训练动作数据按照预设比例随机分为训练集数据及测试集数据；利用所述训练集数据训练预设的初始神经网络模型，生成未测试动作判断模型；利用所述测试集数据测试及调整所述未测试动作判断模型，确定动作判断模型及其对应的版本号。

可选的，在本发明一实施例中，所述获取动作数据及动作判断模块之后还包括：根据所述动作判断模块的版本号判断所述动作判断模型是否需要更新；若是，则更新所述动作判断模型。

可选的，在本发明一实施例中，所述动作类型包括：跳转类型及操作类型；所述根据所述动作类型执行对应的动作，并生成执行结果进一步包括：当所述动作类型为跳转类型时，根据获取的目标页面名及参数进行页面跳转，并生成页面跳转结果；当所述动作类型为操作类型时，根据获取的目标操作名及参数进行操作执行，并生成操作执行结果。

本发明实施例还提供一种移动终端人机交互系统，所述系统包括：客户端及服务端；所述客户端包括数据采集模块、动作判断模块、设置模块及处理模块；所述服务端包括模型下发模块；

所述服务端的模型下发模块向所述客户端的动作判断模块发送动作判断模型；

所述数据采集模块获取动作数据，并对所述动作数据进行规范化处理，生成规范化动作数据；

所述动作判断模块利用所述动作判断模型对所述规范化动作数据进行计算，确定所述规范化动作数据对应的动作标识；

所述设置模块根据所述动作标识判断是否存在后续动作；若是，根据所述动作标识确定对应的动作类型；