[发明专利]模型训练、文本处理方法、装置以及设备

说明书

本申请实施例提供一种模型训练、文本处理方法、装置以及设备，所述模型训练方法包括：获取源语言构成的第一训练文本；获取至少一种目标语言构成的第二训练文本；其中，所述源语言与任一种目标语言不同，所述第一训练文本的数量大于第二训练文本的数量；基于所述第一训练文本与所述第二训练文本语义相同的训练结果，利用所述第一文本以及所述第二文本训练文本识别模型；其中，所述文本识别模型用以基于至少一种目标语言的待处理文本从源语言的知识库中查找与所述待处理文本匹配的目标文本，以获得所述目标文本对应的应答内容。本申请实施例提高了文本识别范围以及效果。

技术领域

本申请实施例涉及计算机应用技术领域，尤其涉及一种模型训练、文本处理方法、装置以及设备。

背景技术

智能问答主要指通过将无序的语料进行有序以及科学的整理，建立知识分类模型，通过知识分类模型识别用户的输入文本，并输出回答，节约人力资源，提高信息的处理效率。例如，智能机器人即为一种常见的智能问答模型。

目前，所有的知识分类模型都是以单一语言为基础而建立的，例如，中文的语料即对应训练中文的知识分类模型，英文的语料即对应训练英文的知识分类模型。针对现有知识模型的使用，进能识别其想对应的文本。

但是，现有的模型训练方法，通常仅能训练单一语言的知识分类模型，缺乏不同语言或者多语言的知识分类模型。

发明内容

本申请实施例提供一种模型训练、文本处理方法、装置以及设备，用以解决现有技术中模型训练方法仅能识别单一语言，不能处理不同语言或多语言识别的技术问题。

第一方面，本申请实施例中提供了一种模型训练方法，包括：

获取源语言构成的第一训练文本；

获取至少一种目标语言构成的第二训练文本；其中，所述源语言与任一种目标语言不同，所述第一训练文本的数量大于第二训练文本的数量；

基于所述第一训练文本与所述第二训练文本语义相同的训练结果，利用所述第一文本以及所述第二文本训练文本识别模型；

其中，所述文本识别模型用以基于至少一种目标语言的待处理文本从源语言的知识库中查找与所述待处理文本匹配的目标文本，以获得所述目标文本对应的应答内容。

第二方面，本申请实施例中提供了一种文本处理方法，包括：

确定待处理文本对应的至少一种目标语言；

基于文本识别模型，从所述至少一种目标语言对应源语言的知识库中查找与所述待处理文本匹配的目标文本；其中，所述文本识别模型基于源语言的第一训练文本以及所述至少一种目标语言的第二训练文本语义相同的训练结果事先训练获得，所述源语言与所述任一种目标语言不同且所述第一训练文本的数量大于所述第二训练文本的数量；

获得与所述目标文本对应的应答内容。

第三方面，本申请实施例提供了一种文本处理方法，包括：

确定用户输入的至少一种目标语言的待处理文本；

发送所述待处理文本至服务端，以供所述服务端确定所述待处理文本对应的至少一种目标语言，并基于文本识别模型，从所述至少一种目标语言对应源语言的知识库中查找与所述待处理文本匹配的目标文本；获取并发送所述目标文本对应应答内容至用户端；

接收所述服务端发送的目标文本的应答内容；

输出所述应答内容，以供所述用户查看；

其中，所述文本识别模型基于源语言的第一训练文本以及至少一种目标语言的第二训练文本语义相同的训练结果事先训练获得，所述源语言与任一种目标语言不同且所述第一训练文本的数量大于第二训练文本的数量。