[发明专利]用于文本生成质量评估的方法、装置和设备

权利要求书

1.一种用于文本生成质量评估的方法，其特征在于，包括：

获取参考文本和生成文本，所述生成文本根据所述参考文本获得；

将所述参考文本和所述生成文本输入预设的评估模型获取评估指标；所述评估模型根据带有主题相似度标签和生成语句辨识标签的样本文本获取；

根据所述评估指标进行文本生成质量的评估。

2.根据权利要求1的方法，其特征在于，根据带有主题相似度标签和生成语句辨识标签的样本文本获取评估模型，包括：

获取样本文本；

获取所述样本文本的主题相似度标签；获取所述样本文本的生成语句辨识标签；

利用带有所述主题相似度标签和所述生成语句辨识标签的所述样本文本对预设的神经网络模型进行训练，获得评估模型。

3.根据权利要求2的方法，其特征在于，所述样本文本包括第一文本对和第二文本对；所述获取样本文本包括：

获取所述参考样本文本和所述生成样本文本，所述生成样本文本根据所述参考样本文本生成；

将所述参考样本文本与所述参考样本文本对应的所述生成样本文本进行组合，获得第一文本对；将不同的两个所述参考样本文本进行组合，获得第二文本对。

4.根据权利要求3的方法，其特征在于，所述获取样本文本的主题相似度标签，包括：

获取所述第一文本对中所述参考样本文本和所述生成样本文本的第一相似度，根据所述第一相似度获取所述第一文本对的主题相似度标签；

获取所述第二文本对中所述参考样本文本之间的第二相似度，根据所述第二相似度获取所述第二文本对的主题相似度标签。

5.根据权利要求4的方法，其特征在于，所述根据第一相似度获取第一文本对的主题相似度标签，包括：

在所述第一相似度满足第一预设条件的情况下，将所述第一文本对的所述主题相似度标签确定为主题相似；和，

在所述第一相似度不满足第一预设条件的情况下，将所述第一文本对的所述主题相似度标签确定为主题不相似。

6.根据权利要求4的方法，其特征在于，所述根据第二相似度获取第二文本对的主题相似度标签，包括：

在所述第二相似度满足第二预设条件的情况下，将所述第二文本对的所述主题相似度标签确定为主题相似；和，

在所述第二相似度不满足第二预设条件的情况下，将所述第二文本对的所述主题相似度标签确定为主题不相似。

7.根据权利要求3的方法，其特征在于，所述获取样本文本的生成语句辨识标签，包括：

在所述样本文本包括生成样本文本的情况下，将所述样本文本的所述生成语句辨识标签确定为具有生成样本文本；

在所述样本文本不包括生成样本文本的情况下，将所述样本文本的所述生成语句辨识标签确定为不具有生成语句。