[发明专利]一种基于智能分配算法的数据标注系统及方法

摘要

本发明公开了一种基于智能分配算法的数据标注系统及方法，具体涉及数据处理领域，包括数据解析模块、特征获取模块和智能分配模块，所述数据解析模块输出端与特征获取模块输入端连接，所述特征获取模块输出端与智能分配模块输入端连接；具体处理步骤如下：利用数据解析模块筛选出小规模兼具代表性及指示性的关键数据作为“先行数据”；标注员对“先行数据”进行试探性标注、精标及分析，得到“标准答案”并动态匹配后取每个标注员的专属标注特征；利用智能分配模块对余下的数据进行智能分配。本发明利用智能分配算法能将数据的人工处理失误率降低，在文本类型数据的人工处理任务中，人工失误率可降低20～30％左右。

主权项

1.一种基于智能分配算法的数据处理系统，其特征在于：包括数据解析模块(1)、特征获取模块(2)和智能分配模块(3)，所述数据解析模块(1)输出端与特征获取模块(2)输入端连接，所述特征获取模块(2)输出端与智能分配模块(3)输入端连接；所述数据解析模块(1)用于针对不同的任务采取不同的深度学习模型，结合Attention机制相关的协调算法，配合多模型融合方案，得到给定数据的基本量化特征；所述特征获取模块(2)用于使用LCS动态规划算法，配合半监督式深度学习算法，对样本数据进行解析，对标注员的标注特征进行解读、归纳、存储与再利用；所述智能分配模块(3)用于利用已获取的特征及量化资源，给定条件限制及目标预期，得到最优的方案设定及任务分配机制，并根据前线的反馈随时调整正在运行的分配机制及方案设定。