[发明专利]一种对标注结果进行纠偏的方法和装置

摘要

本发明提供了一种对标注结果进行纠偏的方法和装置，用于包含多个标注项目的标注任务，采用一种完全自动化的方式对人工标注的结果进行纠偏，在纠偏过程中兼顾标注者的标注质量和打分偏好，采用迭代的方式使得纠偏后的标注结果逐渐趋近于准确值，从而即便众包标注引入非专业人员，也能够提高标注结果的可信度和准确度。

主权项

一种对标注结果进行纠偏的方法，用于包含多个标注项目的标注任务，其特征在于，该方法包括：S1、初始化PX[x]、PXY[k][x][y]以及迭代步数t，所述PX[x]为标注结果x在所有标注项目的标注结果中占的比例，所述PXY[k][x][y]为正确标注结果是x时标注者k将标注项目标注为y的概率；S2、获取各标注者对标注项目i的标注结果，根据当前的PX[x]和PXY[k][x][y]，确定标注项目i的正确标注结果是x的概率PB[i][x]；S3、利用概率PB[i][x]的计算结果确定标注项目i的标注结果V[i]；S4、利用标注结果为x的标注项目的数目更新PX[x]，利用标注者k标注为y而所述步骤S3确定的标注结果为x的标注项目数目，以及标注者k标注的所有标注项目中所述步骤S3确定的标注结果为x的标注项目数目，更新PXY[k][x][y]；S5、将t值更新为加1后的值，判断更新后的t值是否达到预设的最大迭代步数，如果是，转至执行所述步骤S2；否则将当前V[i]值确定为标注项目i纠偏后的标注结果，并输出所述纠偏后的标注结果。