[发明专利]一种用于AIGC的内容纠错系统

说明书

本发明提供了一种用于AIGC的内容纠错系统，包括分词模块、错误检测模块、错误纠正模块和训练模块，所述分词模块将AIGC输出的内容拆分成多个词语，并将每个词语根据词性类别转换成词性编码，所述错误检测模块对词性编码之间的顺序进行检测，输出检测结果，所述错误纠正模块用于对内容进行修正，所述训练模块基于文本进行训练，得到用于所述错误检测模块的检测模型参数；本系统能够对内容的结构句式进行判断并进行纠错，使得AIGC最终输出的内容表达正确并能够被理解。

技术领域

本发明涉及自然语言分析领域，具体涉及一种用于AIGC的内容纠错系统。

背景技术

随着人工智能的发展，各种AIGC应用会在人们的生活中受到普及并改善生活，现有的AIGC应用能够输出规范并能够被理解的内容，但当输出的内容句式结构边复杂时，往往会出现一些错误使得无法正确理解输出的内容，现需要一种内容纠错系统对AIGC生成的内容进行检测并纠错，最终输出正确的内容。

背景技术的前述论述仅意图便于理解本发明。此论述并不认可或承认提及的材料中的任一种公共常识的一部分。

现在已经开发出了很多内容纠错系统，经过我们大量的检索与参考，发现现有的纠错系统有如公开号为CN112183072A所公开的系统，这些系统一般包括获得待纠错文本，对待纠错文本依次进行形近字纠错和常用字纠错，得到第一校正文本，并对待纠错文本进行常用词纠错，得到第二校正文本。然后获得第一校正文本和第二校正文本的困惑度，将困惑度最低的校正文本确定为待纠错文本的校正文本。但该系统仅仅是对常用词的纠错，当用词无错，但组成的复杂句式结构错误时无法检测出，导致无法理解正确的表达意思。

发明内容

本发明的目的在于，针对所存在的不足，提出了一种用于AIGC的内容纠错系统。

本发明采用如下技术方案：

一种用于AIGC的内容纠错系统，包括分词模块、错误检测模块、错误纠正模块和训练模块；

所述分词模块将AIGC输出的内容拆分成多个词语，并将每个词语根据词性类别转换成词性编码，所述错误检测模块对词性编码之间的顺序进行检测，输出检测结果，所述错误纠正模块用于对内容进行修正，所述训练模块基于文本进行训练，得到用于所述错误检测模块的检测模型参数；

所述错误检测模块包括预处理单元和执行单元，所述预处理单元用于对词性编码进行预处理得到初始值，所述执行单元包括节点，并由节点构成输入处理层、中间处理层和输出处理层，所述输入处理层对预处理后的初始值进行处理，中间处理层用于对数据进行缩减性处理，所述输出处理层用于输出检测结果，所述节点为一个计算处理器并包含两个输入端与一个输出端；

进一步的，所述输入处理层、中间处理层和输出处理层共有n-1层，n为所述预处理单元处理后的初始值数量，第i层处理层包含n-i个节点，每个节点与上一层的两个节点的输出连接，并将输出值与下一层的一个节点连接，第一处理层为输入处理层，第n-1层处理层为输出处理层，所述节点根据两个输入值确定一个连接系数，并将同一层中最大的连接系数变更为1，其余连接系数变更为0；

进一步的，所述输入处理层的节点根据下述公式处理得到输出值Out：

；①

；②

其中，①式为连接系数为1对应的节点以及左侧节点的执行公式，②式为连接系数为1对应的节点右侧的节点的执行公式，k为连接系数，in(1)为第一输入值，in(2)为第二输入值；

所述中间处理层的节点根据下述公式处理得到输出值Out：

；③

；④