[发明专利]一种基于众包平台处理图像标注任务的交互方法

摘要

本发明属于图像标注技领域术，具体为基于众包平台处理图像标注任务的交互方法。本发明首先构造一套线上众包工作模式，使得任务需求方和众包成员可以在上面完成标注任务，其次，以图像标注任务为主要研究和切入点，去设计和实现相应的交互方法；具体包括：构建图像标注任务的分类体系，搭建众包平台；建立交互方法的设计准则和设计流程；设计基于众包平台处理图像标注任务的交互方法的具体操作步骤。本发明方法提高了众包工作者的标注效率和用户体验，从而更加快速的为机器学习等科研领域提供图像数据训练集，并且利用网络众包工作模式完成图像数据标注工作，也能够为残疾人等弱势群体提供新的就业和增加收入的机会。

主权项

一种基于众包平台处理图像标注任务的交互方法，其特征在于，首先构造一套线上众包工作模式，使得任务需求方和众包成员可以在上面完成标注任务，其次，以图像标注任务为主要研究和切入点，去设计和实现相应的交互方法；具体内容如下：（一）构建图像标注任务的分类体系，搭建众包平台将所面临的图像标注任务分为以下四类：（1）图像语义标注：主要针对单张图片的语义概括或者标签定义，包括对其添加一至多个关键词进行标注；或者通过绑定一个问题的形式提供给众包工作者进行标注；（2）图像点位标注：主要针对单张图片中的多个部位确定，对该图片中需要确定的部位的位置进行标注，以方便用户能够快速定位到图片这些部位的位置；该类图片标注需要提供待标注部位的名称集，众包工作者根据名称集在该图片中标注出具体的位置点；（3）图像区域标注：主要针对单张图片中的物体识别，并确定物体所在的具体区域，对该图片中所需识别物体的位置区域进行标注，以方便用户能够快速定位到图片这些部位的位置，并且能够从图片中截取这些物体，进行后续的分析；该类图片标注需要提供待标注物体的名称集，众包工作者根据名称集在该图片中标注出具体的物体区域；（4）图像序列筛选标注：主要针对多张图片或视频的图像帧序列，通过对多张图片进行筛选，标注记录下某一些特殊图片的序号，以方便用户能够快速定位到图片集合中这些特殊图片的序号位置；该类图片标注需要提供详细的筛选标注规则，众包工作者根据筛选标注规则在该图片中标注出具体的图片序号；另外，通过开源框架“pybossa”搭建一个众包平台‑“众研”平台，作为针对图像标注任务交互方法研究并应用的实验平台；（二）建立交互方法的设计准则和设计流程为了能够更好的在“众研”平台上支持图像标注任务的发布与标注交互过程，交互方法的设计准则如下：（1）搭建图片服务器，编写任务上传文件自动生成脚本，辅助任务需求方更快速生成任务导入文件；（2）实现项目任务可通过本地CSV文件导入，丰富导入任务形式，辅助任务需求方更方便的完成任务上传发布工作；（3）针对已经具体分类的四个类别的图像标注任务进行具体的方案设计，构建四类交互模板，并且使其可视化，由任务需求方自己动态更新；（4）考虑到众包工作者来自社会不同阶层，任务交互界面应尽量简洁易懂，能够快速上手；（5）简化任务的标注过程，为了提高工作效率，使得众包工作者能够在同等时间完成更多的众包任务，要尽可能赚取报酬；（6）为一些对结果有基础限制的任务，添加结果检验机制，提高用户标注准确度；（7）尽可能的为众包工作者提供多样化的完成和标注方式选择，从而提高用户体验；交互方法的设计流程如下：首先搭建图片服务器，建立任务导入文本生成脚本以及增加本地CSV文件导入模块，从而优化任务上传过程；其次，构建结果检验机制、可视化和个性化机制过程，进行交互界面和算法设计从而优化任务标注过程；（三）设计基于众包平台处理图像标注任务的交互方法的具体操作步骤设计的交互方法的具体操作流程如下：首先，当用户点击做任务按钮后，进入图像标注页面时触发任务显示函数，此时，当前任务和标注用户将作为系统的输入参数，根据输入参数，首先验证该任务是否全部完成，若未完全完成，则提示相关的提示信息，否则加载用户任务完成进度条，初始化标注点位和答案记录表格；然后，验证图片URL的有效性，根据图片原始大小和用户界面尺寸作相应的自适应调节；顺利的话，根据标注点位移动触发事件，记录点位像素数组并将其更新到前台答案记录表格中显示，图片自适应调整和标注点位记录，自适应调整：首先根据图片Url获取图像基本信息，如果原图长宽比大于默认图片框的长宽比，则以默认图片框的长为基准，对原图进行缩放，否则，则以默认图片框的宽为基准，对原图进行缩放，最终结果返回缩放比例；标注点位记录：先计算点位在默认图片框中的像素坐标，然后乘以缩放比例，计算并返回点位的真实像素坐标；最后，若用户点击提交结果按钮，则根据提前定义的结果规则去验证结果的有效性；若有效，则返回记录答案；否则返回相关报错信息；验证结果的有效性：在用户提交任务结果后，将此结果和结果规则的每一条规则进行比对校验，如果全部符合，则返回true,否则返回false；通过比对当前答案是否符合结果规则，进行结果提交前的有效校验，从而规避一些基础的错误，提高标注准确度。