[发明专利]一种结合语音的意图识别方法及装置

权利要求书

1.一种结合语音的意图识别方法，其特征在于，包括：

在触摸屏上显示文本信息；

接收用户在所述触摸屏上的唤醒信号；

当所述唤醒信号满足唤醒条件时，开启拾音功能和截图功能；

接收用户输入的语音信息；

截取用户在所述触摸屏上选取的文字的图片信息；

根据所述语音信息和所述图片信息，识别所述用户的意图。

2.根据权利要求1所述的一种结合语音的意图识别方法，其特征在于，所述根据所述语音信息和所述图片信息，识别所述用户的意图具体包括：

将所述语音信息转换为第一文本；

识别所述图片信息中的文字，并转换为第二文本；

从预设的文本库中查找与所述第一文本匹配的目标文本；

根据所述目标文本预先标注的替换词，确定所述第一文本中的替换词；

将所述第一文本中的替换词替换为所述第二文本；

根据替换后的所述第一文本，识别所述用户的意图。

3.根据权利要求1所述的一种结合语音的意图识别方法，其特征在于，还包括：

根据所述用户的意图在预设题库中搜索对应的答案并展示。

4.根据权利要求1所述的一种结合语音的意图识别方法，其特征在于，所述截取用户在所述触摸屏上选取的文字的图片信息具体包括：

接收用户在所述触摸屏上的触摸信号；

当所述触摸信号为连续触摸信号，且所述触摸信号的起点和终点不在同一水平线上时，以所述触摸信号的起点和终点构成的直线为对角线构建矩形框；

截取所述矩形框内的文字的图片信息。

5.根据权利要求4所述的一种结合语音的意图识别方法，其特征在于，还包括：

当所述触摸信号为连续触摸信号，且所述触摸信号的起点和终点在同一水平线上时，截取所述触摸信号移动时所经过的文字的图片信息。

6.一种结合语音的意图识别装置，其特征在于，包括：

显示模块，用于在触摸屏上显示文本信息；

唤醒信号接收模块，用于接收用户在所述触摸屏上的唤醒信号；

处理模块，用于当所述唤醒信号满足唤醒条件时，开启拾音功能和截图功能；

语音接收模块，用于接收用户输入的语音信息；

图片截取模块，用于截取用户在所述触摸屏上选取的文字的图片信息；

意图识别模块，用于根据所述语音信息和所述图片信息，识别所述用户的意图。

7.根据权利要求6所述的一种结合语音的意图识别装置，其特征在于，所述意图识别模块包括：

文本转换单元，用于将所述语音信息转换为第一文本；

图片识别单元，用于识别所述图片信息中的文字，并转换为第二文本；

查找单元，用于从预设的文本库中查找与所述第一文本匹配的目标文本；

替换词确定单元，用于根据所述目标文本预先标注的替换词，确定所述第一文本中的替换词；

替换单元，用于将所述第一文本中的替换词替换为所述第二文本；

意图识别单元，用于根据替换后的所述第一文本，识别所述用户的意图。

8.根据权利要求6所述的一种结合语音的意图识别装置，其特征在于，还包括：

搜索及展示模块，用于根据所述用户的意图在预设题库中搜索对应的答案并展示。

9.根据权利要求6所述的一种结合语音的意图识别装置，其特征在于，所述图片截取模块包括：

触摸信号接收单元，用于接收用户在所述触摸屏上的触摸信号；

矩形框构建单元，用于当所述触摸信号为连续触摸信号，且所述触摸信号的起点和终点不在同一水平线上时，以所述触摸信号的起点和终点构成的直线为对角线构建矩形框；

截取单元，用于截取所述矩形框内的文字的图片信息。

10.根据权利要求9所述的一种结合语音的意图识别装置，其特征在于，

所述截取单元，还用于当所述触摸信号为连续触摸信号，且所述触摸信号的起点和终点在同一水平线上时，截取所述触摸信号移动时所经过的文字的图片信息。