[发明专利]一种文本处理方法、装置、设备及存储介质

权利要求书

1.一种文本处理方法，其特征在于，包括：

确定待检测文本中各目标分词的目标标签和目标修改结果，所述目标分词为切分所述待检测文本得到的分词，所述目标标签用于表示所述目标分词的修改方式；

根据各所述目标分词的目标标签和目标修改结果，确定各所述目标分词的目标结果；

拼接各所述目标分词的目标结果，得到所述待检测文本对应的目标文本。

2.根据权利要求1所述的方法，其特征在于，所述确定待检测文本中各目标分词的目标标签和目标修改结果，包括：

将所述待检测文本输入目标文本处理模型，得到所述待检测文本中各目标分词的目标标签和目标修改结果，所述目标文本处理模型由训练样本包含的样本分词训练初始文本处理模型得到。

3.根据权利要求2所述的方法，其特征在于，所述目标文本处理模型的训练过程如下：

将第一样本输入所述初始文本处理模型，得到所述第一样本中第一分词对应的样本标签和样本修改结果，所述第一样本为训练样本，所述第一分词为切分所述第一样本得到的分词；

确定所述样本标签和期望标签的第一损失值以及所述样本修改结果和期望修改结果的第二损失值；

根据所述第一损失值和第二损失值，对所述初始文本处理模型进行训练，得到目标文本处理模型。

4.根据权利要求3所述的方法，其特征在于，所述样本标签包括第一样本标签和第二样本标签，所述第一样本标签包括词性变换标签、删除标签或不修改标签，所述第二样本标签包括插入标签或不插入标签；

所述样本修改结果包括第一样本修改结果和第二样本修改结果，所述第一样本修改结果包括所述第一分词的词性修改结果或所述第一分词的删除结果，所述第二样本修改结果包括所述第一分词的插入词结果。

5.根据权利要求4所述的方法，其特征在于，所述将第一样本输入所述初始文本处理模型，得到所述第一样本中第一分词对应的样本标签和样本修改结果，包括：

确定所述第一分词的插入词结果，作为所述第一分词的第二修改结果，以及确定所述第一分词的二元标签，作为所述第一分词的第二样本标签，所述二元标签用于表示所述第一分词所在的位置是否需要插入其他分词；

确定所述第一分词是否需要修改，所述修改用于修改所述第一分词的词性或删除所述第一分词；

当确定所述第一分词需要修改时，根据所述初始文本处理模型输出的所述第一分词的修改结果和/或所述第一分词的标签确定所述第一分词的第一样本修改结果和第一样本标签；否则，根据所述初始文本处理模型输出的不修改指示结果确定所述第一分词的第一样本修改结果和第一样本标签，所述不修改指示结果用于表示所述第一分词不需要修改。

6.根据权利要求5所述的方法，其特征在于，所述确定所述第一分词是否需要修改，包括：

确定所述第一分词不需要修改的第一概率；

如果所述第一概率大于或等于第一设定阈值，则确定所述第一分词不需要修改；否则，确定所述第一分词需要修改。

7.根据权利要求5所述的方法，其特征在于，所述确定所述第一分词是否需要修改，包括：

确定所述第一分词的标签为第一预设标签的第二概率，所述第一预设标签用于表示所述第一分词不需要修改；

如果所述第二概率大于或等于第二设定阈值，则确定所述第一分词不需要修改；否则，确定所述第一分词需要修改。

8.根据权利要求5所述的方法，其特征在于，所述确定所述第一分词是否需要修改，包括：

确定所述第一分词不需要修改的第一概率以及所述第一分词需要修改的第三概率；

如果所述第三概率与第一概率的差值大于或等于第三设定阈值，则确定所述第一分词需要修改；否则，确定所述第一分词不需要修改。