[发明专利]标注数据处理方法、相关装置及计算机程序产品

权利要求书

1.一种标注数据处理方法，包括：

确定与待标注数据类型一致的历史标注数据，并获取与所述历史标注数据对应的平均打回轮次；

获取标注对象对所述待标注数据进行标注的过程中的实际打回轮次；

根据所述实际打回轮次和所述平均打回轮次的轮次差，确定对所述待标注数据进行标注的标注质量信息。

2.根据权利要求1所述的方法，还包括：

获取所述标注对象与所述待标注数据类型对应的能力标签；

根据所述标注质量信息对所述能力标签进行修正，并根据修正后的标签确定后续发送给所述标注对象的目标待标注数据。

3.根据权利要求2所述的方法，其中，所述获取与所述历史标注数据对应的平均打回轮次，包括：

获取所述待标注数据的数据类型，并根据所述数据类型确定有效数据调整规则；

根据所述有效数据调整规则对所述历史标注数据对应的打回轮次数据集合进行调整，所述打回轮次数据集合中记录有对所述历史标注数据进行标注的标注对象的数量以及与各标注对象对应的打回轮次；

根据调整后的打回轮次数据集合获取与所述历史标注数据对应的平均打回轮次。

4.根据权利要求1所述的方法，还包括：

获取标注数据的期望打回轮次；

响应于所述期望打回轮次小于所述平均打回轮次数，且所述期望打回轮次与所述平均打回轮次之间的差距大于第一预设阈值，根据所述期望打回轮次调整所述平均打回轮次。

5.根据权利要求1所述的方法，还包括：

根据所述标注对象分别对不同的待标注数据进行标注后得到的标注质量信息生成标注质量信息集合；

响应于所述标注质量信息集合中一类标注质量信息的数量占比超过第一预设比例，为所述标注对象生成第一标识；其中，所述一类标注质量信息指标注质量信息反映的标注质量低于预设的标注质量。

6.根据权利要求5所述的方法，还包括：

响应于所述标注质量信息集合中二类标注质量信息的数量占比超过第二预设比例，为所述标注对象生成第二标识；其中，所述二类标注质量信息指标注质量信息反映的标注质量高于预设的标注质量。

7.根据权利要求6所述的方法，还包括：

根据各标注对象各自对应的第一标识和/或第二标识的数量关系，生成与各标注对象相对应的标注能力等级信息；

根据所述标注能力等级信息对各标注对象进行排序，并根据排序结果生成标注对象信息清单。

8.一种标注数据处理装置，包括：

历史标注数据获取及平均轮次确定单元，所述历史标注数据获取及平均轮次确定单元中包括被配置成被配置成确定与待标注数据类型一致的历史标注数据的历史标注数据获取子单元，以及被配置成获取与所述历史标注数据对应的平均打回轮次的平均轮次确定子单元；

实际轮次确定单元，被配置成获取标注对象对所述待标注数据进行标注的过程中的实际打回轮次；

质量信息生成单元，被配置成根据所述实际打回轮次和所述平均打回轮次的轮次差，确定对所述待标注数据进行标注的标注质量信息。

9.根据权利要求8所述的装置，还包括：

能力标签获取单元，被配置成获取所述标注对象与所述待标注数据类型对应的能力标签；

能力标签修正及分配调整单元，被配置成根据所述标注质量信息对所述能力标签进行修正，并根据修正后的标签确定后续发送给所述标注对象的目标待标注数据。