[发明专利]一种纠错评测方法和相关装置

说明书

本申请实施例公开了一种纠错评测方法，可以通过分类器对获取的待分类纠错数据进行分类，得到第一评测集和第二评测集。待分类纠错数据为针对输入字符串产生的不满足用户纠错需求的纠错数据，第一评测集中待分类纠错数据的纠错结果的可信度大于第一阈值，第二评测集中待分类纠错数据的纠错结果的可信度小于第二阈值，第一阈值大于第二阈值。根据属于第一评测集或第二评测集的纠错数据数量计算纠错方案的目标评测指标，该目标评测指标用于对纠错方案进行评测。该方法得到的目标评测指标有利于得到合理的评测结果，根据该评测结果可以正确地指导输入法纠错方案的优化，使得输入法通过优化后的纠错方案进行纠错时提供合理的纠错候选项，提高用户体验。

技术领域

本申请涉及输入法领域，特别是涉及一种纠错评测方法和相关装置。

背景技术

输入法属于一种常用的文字输入工具，在通过输入法输入字符时，由于用户可能输入错误，输入法可以针对用户有可能输出的字符提供纠错候选项以帮助用户纠错。

为了对输入法的纠错方案进行优化，可以对输入法的纠错方案进行评测，从而根据评测结果指导输入法纠错方案的优化。目前的纠错评测方法主要是主要分为纠错覆盖率和纠错误纠率两方面的评测，纠错覆盖率表示用户输入错误时输入法为用户提供想要的纠错候选项的概率，纠错误纠率表示用户输入正确时输入法仍然提供纠错候选项干扰用户的概率。

但是这种评测方法，在计算纠错覆盖率和纠错误纠率时，没有考虑纠错结果的合理性，使得计算得到的纠错覆盖率和纠错误纠率不准确，从而根据评测结果错误地指导输入法纠错方案的优化，没有考虑到纠错方案的合理性，这样，通过优化后的纠错方案进行纠错时会提供一些莫名其妙的纠错候选项，大大降低了用户体验。

发明内容

为了解决上述技术问题，本申请提供了一种纠错评测方法和相关装置，可以正确地指导输入法纠错方案的优化，使得输入法通过优化后的纠错方案进行纠错时可以提供合理的纠错候选项，提高用户体验。

本申请实施例公开了如下技术方案：

第一方面，本申请实施例提供一种纠错评测方法，所述方法包括：

获取待分类纠错数据，所述待分类纠错数据为针对输入字符串产生的不满足用户纠错需求的纠错数据；

通过分类器对所述待分类纠错数据进行分类，得到第一评测集和第二评测集；所述第一评测集中待分类纠错数据的纠错结果的可信度大于第一阈值，所述第二评测集中待分类纠错数据的纠错结果的可信度小于第二阈值，所述第一阈值大于所述第二阈值；所述分类器是根据纠错数据和纠错数据的特征数据训练得到的，所述特征数据用于反映所述纠错数据中纠错结果的可信度；

根据属于所述第一评测集或所述第二评测集的纠错数据数量计算纠错方案的目标评测指标，所述目标评测指标用于对所述纠错方案进行评测。

可选的，所述待分类纠错数据为展示纠错候选项且用户针对所述输入字符串选定特征候选项的纠错数据，所述目标评测指标为纠错误纠率；所述特征候选项为与所述输入字符串匹配的候选项。

可选的，所述根据属于所述第一评测集或所述第二评测集的纠错数据数量计算纠错方案的目标评测指标，包括：

通过所述纠错方案针对所述输入字符串产生纠错数据过程中，确定属于所述第二评测集的纠错数据的数量为第一数值，以及用户针对所述输入字符串选定特征候选项的纠错数据的数量为第二数值；

将所述第一数值与所述第二数值的比值作为所述纠错误纠率。

可选的，所述待分类纠错数据为未展示纠错候选项且用户针对所述输入字符串输入退格符的纠错数据，所述目标评测指标为纠错覆盖率。

可选的，所述根据属于所述第一评测集或所述第二评测集的纠错数据数量计算纠错方案的目标评测指标，包括：