[发明专利]数据标注方法、计算机程序产品、存储介质及电子设备

说明书

本申请实施例提供一种数据标注方法、计算机程序产品、存储介质及电子设备。其中，数据标注方法包括：获取第一待标注数据及其推理结果，第一待标注数据的推理结果为利用标注模型对其进行预测得到的信息；获取用户标注的第二待标注数据的标注标签，第二待标注数据为第一待标注数据中的部分待标注数据；根据第二待标注数据的标注标签估计第一待标注数据中尚未标注的第三待标注数据的标注准确率是否已经达标，第三待标注数据的标注准确率为根据其推理结果所确定的推理标签的准确率；若是，则将第三待标注数据的推理标签确定为第三待标注数据的标注标签。该方法显著提高了数据标注的效率，并且标注准确率也得到了有效保障。

技术领域

本申请涉及人工智能技术领域，具体而言，涉及一种数据标注方法、计算机程序产品、存储介质及电子设备。

背景技术

数据标注是人工智能领域的一项重要任务，所谓数据标注，即为数据打上可靠的标签信息。例如，在图像分类任务中，数据标注可以指为训练图像标出其真实类别，从而可以以此真实类别为监督信号，对图像分类模型进行有监督训练，使得模型能够学习到训练图像的内容和其真实类别之间的对应关系，进而可以对其他图像进行有效分类。

然而，目前的数据标注基本上是完全依赖人工完成的，其效率十分低下。

发明内容

本申请实施例的目的在于提供一种数据标注方法、计算机程序产品、存储介质及电子设备，以改善上述技术问题。

为实现上述目的，本申请提供如下技术方案：

第一方面，本申请实施例提供一种数据标注方法，包括：获取第一待标注数据及其推理结果；其中，所述第一待标注数据的推理结果为利用标注模型对所述第一待标注数据进行预测得到的信息；获取用户标注的第二待标注数据的标注标签；其中，所述第二待标注数据为所述第一待标注数据中的部分待标注数据；根据所述第二待标注数据的标注标签估计所述第一待标注数据中尚未标注的第三待标注数据的标注准确率是否已经达标；其中，所述第三待标注数据的标注准确率为根据所述第三待标注数据的推理结果所确定的推理标签的准确率；若所述第三待标注数据的标注准确率已经达标，则将所述第三待标注数据的推理标签确定为所述第三待标注数据的标注标签。

上述方法只需对第一待标注数据中的第二待标注数据进行人工标注，基于其标注结果，就可以对第一待标注数据中的尚未标注的第三待标注数据进行标注准确率评估，并在其准确率达标时对第三待标注数据进行自动标注，而无需对所有待标注数据都进行人工标注。从而，该方法显著提高了数据标注的效率，并且标注准确率也得到了有效保障。其中，第三待标注数据的标注准确率达到了预期的标准(即达标)，而第二待标注数据由于是人工标注的，在用户处于正常状态时，其标注准确率可以认为接近或等于100％。

第二方面，本申请实施例提供一种计算机程序产品，包括计算机程序指令，所述计算机程序指令被处理器读取并运行时，执行第一方面或第一方面的任意一种可能的实现方式提供的方法。

第三方面，本申请实施例提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序指令，所述计算机程序指令被处理器读取并运行时，执行第一方面或第一方面的任意一种可能的实现方式提供的方法。

第四方面，本申请实施例提供一种电子设备，包括：存储器以及处理器，所述存储器中存储有计算机程序指令，所述计算机程序指令被所述处理器读取并运行时，执行第一方面或第一方面的任意一种可能的实现方式提供的方法。

附图说明

为了更清楚地说明本申请实施例的技术方案，下面将对本申请实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本申请的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1示出了本申请实施例提供的数据标注方法的流程；