[发明专利]一种智能终端的交互方法、智能终端及存储介质

说明书

本发明公开一种智能终端的交互方法、智能终端及存储介质。该智能终端的交互方法包括对获取到的用户图像进行分析得到其中包含的唇形特征；对所述唇形特征进行识别得到与所述唇形特征匹配的指令信息；根据所述指令信息的指令内容执行相应的操作。通过上述方式可令智能终端在不依赖于用户的语音信息，不受周围环境声音的影响的情况下通过用户图像对用户的指令信息进行获取，提升了智能终端的人机交互的适用性，也提升了用户体验。

技术领域

本发明涉及智能终端的人机交互技术领域，尤其涉及一种智能终端的交互方法、智能终端及存储介质。

背景技术

随着智能终端的发展，能够与通过用户的语音指令执行相应操作或与用户进行人机交互的智能设备越来越普遍。现有技术中，智能音箱、手机、智能机器人等智能设备可以获取用户的指令与用户进行智能人机交互，例如，根据用户的语音控制指令执行相应播放音乐、视频等操作，或根据用户的发问进行相应回答进而与用户进行聊天互动等。

但用户在户外的嘈杂环境中通过语音与智能终端进行交互时，可能由于环境内存在噪声导致智能终端无法正确对用户的语音指令进行识别，导致交互错误等情况；或在如车厢等人较多的环境中，或图书馆、电影院等不便于出声的环境中时，用户通过语音与智能终端进行交互可能会对周围的其他人造成干扰，也该自己带来不便；由此，现有技术的智能终端的人机交互方法不能满足更多情况的适用。

发明内容

本发明的目的在于提供一种智能终端的交互方法、智能终端及存储介质，该智能终端的用户交互方法提高智能终端交互的适用性。

为实现上述目的，本发明提供一种智能终端的交互方法，所述交互方法包括：

对获取到的用户图像进行分析得到其中包含的唇形特征；

对所述唇形特征进行识别得到与所述唇形特征匹配的指令信息；

根据所述指令信息的指令内容执行相应的操作。

另一方面，本发明提出了一种智能终端，该智能终端包括图像获取装置、人机交互电路、存储器和处理器，所述图像获取装置、人机交互电路、存储器和处理器相互连接；

所述存储器用于存储所述处理器执行的计算机指令以及相应的深度学习模型；

所述处理器用于执行所述计算机指令以生成相应的人机交互的控制指令，并向所述人机交互电路发送所述控制指令，以使所述人机交互电路根据所述控制指令实现上述智能终端的交互方法。

另一方面，本发明还提出了一种存储介质，该存储介质存储有计算机程序数据，所述计算机程序数据能够被执行以实现上述智能终端的交互方法。

有益效果：区别于现有技术，本发明的智能终端的交互方法通过对用户图像进行分析得到相应的唇形特征，进而利用分析得到的唇形特征进行匹配得到相应的指令信息，从而根据得到的指令信息执行相应操作。在本申请的智能终端的交互方法的执行过程中不依赖于用户的语音信息，且不受周围环境声音的影响，用户可以不发出声音或发出很小的声音，或用户周围有较大的噪声，智能终端仍可通过用户图像对用户的指令信息进行获取，提升了智能终端的人机交互的适用性，也提升了用户体验。

附图说明

图1是本发明智能终端的交互方法第一实施例的流程示意图；

图2是本发明智能终端的交互方法第二实施例的流程示意图；

图3是本发明智能终端的交互方法第三实施例的流程示意图；

图4是本发明智能终端的交互方法第四实施例的流程示意图；

图5是本发明智能终端的交互方法第五实施例的流程示意图；

图6是图5中步骤S51的一实施方式的流程示意图；