[发明专利]标注任务的调度方法、装置和可读存储介质

说明书

本公开涉及一种标注任务的调度方法、装置和可读存储介质，其中标注任务的调度方法包括：执行人工标注任务，以生成第一标注结果；执行模型训练任务，以基于所述第一标注结果对知识获取模型进行模型训练，获得性能参数值满足第一预设条件的知识获取模型；执行模型标注任务，以利用知识获取模型从第二原始信息推荐池中提取知识内容，并基于知识内容生成第二标注结果；执行标注结果运用任务，以基于第一标注结果和第二标注结果进行所述知识内容的运用；其中所述标注结果运用任务的调度优先级低于人工标注任务、模型训练任务和模型标注任务中任意一个的调度优先级。本公开技术方案能够保证知识内容标注任务的全流程顺利进行。

技术领域

本公开涉及计算机技术领域，尤其涉及一种标注任务的调度方法、装置和可读存储介质。

背景技术

随着人工智能技术的不断发展，越来越多的利用知识获取模型从原始信息中标注知识内容，而知识获取模型通常在进行标注前需要先进行模型训练，模型训练时所需要的样本通常是由人工标注得到，由此可见，上述知识内容的标注过程涉及到人工标注任务、模型训练任务和模型标注任务三个任务过程；在通过上述三个任务过程标注出知识内容的基础上，通常还可以运用人工标注任务得到的人工标注结果，或者模型标注任务得到模型标注结果进行一些后续处理，即还需要执行标注结果运用任务，上述各个任务的执行都需要消耗计算资料。因此，为了保证知识内容标注任务的高效、快捷运行，提高标注效率，需要协调各个任务的执行。

发明内容

为了解决上述技术问题或者至少部分地解决上述技术问题，本公开提供了一种标注任务的调度方法、装置、设备和可读存储介质。

本发明实施例第一个方面提供了一种标注任务的调度方法，包括：

执行人工标注任务，以对第一原始信息推荐池中的原始信息进行知识内容的人工标注，生成第一标注结果；

执行模型训练任务，以基于所述第一标注结果对知识获取模型进行模型训练，获得性能参数值满足第一预设条件的知识获取模型；

执行模型标注任务，以利用所述知识获取模型从第二原始信息推荐池中提取知识内容，并基于所述知识内容生成第二标注结果；

执行标注结果运用任务，以基于所述第一标注结果和所述第二标注结果进行所述知识内容的运用；

其中，所述标注结果运用任务的调度优先级低于所述人工标注任务、所述模型训练任务和所述模型标注任务中任意一个的调度优先级。

在一些实施例中，所述执行人工标注任务，以对第一原始信息推荐池中的原始信息进行知识内容的人工标注，生成第一标注结果，包括：

构建第一原始信息推荐池；

向用户推送所述第一原始信息推荐池中第一预设数量的原始信息，并接收用户基于所述第一预设数量的原始信息反馈的知识内容，作为第一标注结果。

在一些实施例中，所述执行模型训练任务，以基于所述第一标注结果对知识获取模型进行模型训练，获得性能参数值满足第一预设条件的知识获取模型，包括：

基于所述第一标注结果对知识获取模型进行模型训练，以获取训练后的知识获取模型；

构建包括第二预设数量的原始信息的模型评估推荐池；

基于所述模型评估推荐池中的原始信息，分别利用所述训练后的知识获取模型进行知识内容提取，以获取第一模型评估结果，以及进行知识内容的人工标注，以获取人工标注结果；

基于所述第一模型评估结果和所述人工标注结果确定性能参数值满足第一预设条件的知识获取模型。

在一些实施例中，所述构建包括第二预设数量的原始信息的模型评估推荐池，包括：