[发明专利]分词处理方法、装置、移动终端及计算机可读存储介质

说明书

本发明提出一种分词处理方法、装置、移动终端及计算机可读存储介质，其中，该方法包括：在获取到待分词语句时，确定所述待分词语句对应的目标语言类型；根据所述目标语言类型，分别获取待分词语句中各单字对应的第一特征向量、两字对应的第二特征向量，及所述待分词语句中专有名词对应的第三特征向量；根据所述第一特征向量、第二特征向量及第三特征向量，确定各单字当前的第四特征向量；根据预设的汉字标签转移矩阵及所述各单字当前的第四特征向量，将所述待分词语句进行分词处理。由此，实现了根据待分词语句对应的目标语言类型，对待分词语句的分词处理，提高了对各种语言类型的待分词语句进行分词的准确性，且可以实现根据需要加载合适的资源，节省了移动终端的存储空间，改善了用户体验。

技术领域

本发明涉及分词处理技术领域，尤其涉及一种分词处理方法、装置、移动终端及计算机可读存储介质。

背景技术

随着计算机技术的不断发展，分词技术已经广泛应用于搜索引擎、机器翻译、语音合成、自动摘要等领域。其中，分词技术是指将一句或者一段文字切分成一个一个词语的技术。

现有技术，通常是利用基于统计的分词模型或基于词典的分词模型，对待分词语句进行分词处理。但是，当前的分词模型，往往是通过对特定语言的语料训练后得到的，从而对其它语言进行分词处理时，准确性较低，用户体验差。

发明内容

本发明旨在至少在一定程度上解决相关技术中的技术问题之一。

为此，本发明提出一种分词处理方法，实现了根据待分词语句对应的目标语言类型，对待分词语句的分词处理，提高了对各种语言类型的待分词语句进行分词的准确性，且可以实现根据需要加载合适的资源，节省了移动终端的存储空间，改善了用户体验。

本发明还提出一种分词处理装置。

本发明还提出一种移动终端。

本发明还提出一种计算机可读存储介质。

本发明第一方面实施例提出了一种分词处理方法，包括：在获取到待分词语句时，确定所述待分词语句对应的目标语言类型；根据所述目标语言类型，分别获取待分词语句中各单字对应的第一特征向量、两字对应的第二特征向量，及所述待分词语句中专有名词对应的第三特征向量；根据所述第一特征向量、第二特征向量及第三特征向量，确定各单字当前的第四特征向量；根据预设的汉字标签转移矩阵及所述各单字当前的第四特征向量，将所述待分词语句进行分词处理。

本发明实施例的分词处理方法，在获取到待分词语句时，首先确定待分词语句对应的目标语言类型，然后根据目标语言类型，分别获取待分词语句中各单字对应的第一特征向量、两字对应的第二特征向量，及待分词语句中专有名词对应的第三特征向量后，再根据第一特征向量、第二特征向量及第三特征向量，确定各单字当前的第四特征向量，从而根据预设的汉字标签转移矩阵及各单字当前的第四特征向量，将待分词语句进行分词处理。由此，实现了根据待分词语句对应的目标语言类型，对待分词语句的分词处理，提高了对各种语言类型的待分词语句进行分词的准确性，且可以实现根据需要加载合适的资源，节省了移动终端的存储空间，改善了用户体验。

本发明第二方面实施例提出了一种分词处理装置，包括：第一确定模块，用于在获取到待分词语句时，确定所述待分词语句对应的目标语言类型；第一获取模块，用于根据所述目标语言类型，分别获取待分词语句中各单字对应的第一特征向量、两字对应的第二特征向量，及所述待分词语句中专有名词对应的第三特征向量；第二确定模块，用于根据所述第一特征向量、第二特征向量及第三特征向量，确定各单字当前的第四特征向量；第一处理模块，用于根据预设的汉字标签转移矩阵及所述各单字当前的第四特征向量，将所述待分词语句进行分词处理。