[发明专利]一种具有系统检测功能的数据处理方法及系统

说明书

技术领域

本发明涉及一种具有系统检测功能的数据处理方法及系统。

背景技术

目前的科技奖励管理项目在数据处理上具有以下缺点：

科技奖励管理项目的数据量大，每年都有大量的数据需要处理，在处理的过程中，数据的筛选不够合理，另外，现有的系统缺乏自动查重、自动处理的功能。

大量、繁琐数据的筛选难度大，处理过程不够合理，原有系统对数据进行一次筛选，筛选依据单一，人为干预因素多，缺乏公平合理性。人工处理数据工作量大、效率低，原有系统需要人工进行数据的查阅比对，工作效率低，任务繁重。

在申报科技奖励时，填报的申报材料较多，当申报材料填写的为项目名称或论文论著名称时及项目完成人及专利文献时，需要根据名称判断是否存在重复申请的嫌疑，目前，该工作均是通过人为识别，由于申报数据的量大，人为识别精确度不够。

发明内容

本发明的目的就是为了解决上述问题，提供一种项目申报数据处理方法及系统，本发明的数据判断优势在于系统自动提取查重因素，进行复杂匹配计算，减少人为因素，提高查重结果的公正和正确性，减轻工作人员工作量，极大提高工作效率。

为了实现上述目的，本发明采用如下技术方案：

一种具有系统检测功能的数据处理方法，包括如下步骤：

步骤一：通过JS脚本自动检测当前用户使用浏览器版本，对于非IE系列浏览器给予提示，并关闭；检测使用浏览器符合要求即进入系统进行数据采集；

步骤二：采集的申报项目的数据信息存储到网络服务器的缓存区，主计算机调用网络服务器的缓存区的申报项目的数据信息并存储到主计算机的第一缓存区；采集的图片、Word和PDF文档数据以文件形式存储至主计算机的第二缓存区，将文档相对路径存储至项目申报数据库附件子数据表中；

步骤三：主计算机读取第一缓存区中的申报项目的信息，判断数据是否符合要求；对于图片文档，利用项目申报数据库附件子数据表中文档路径调用主计算机的第二缓存区图片文档，如果项目申报数据表中申报项目的信息及图片文档均符合要求就进入步骤四，如果不符合就返回步骤二；

步骤四：将步骤三中符合要求的项目数据从项目申报数据库同步到评审数据库，该同步过程采取单向同步；对评审数据库的申报信息进行三次筛选，并将最终数据输出在服务器的浏览页面上。

所述步骤二中具体为：将与项目直接相关的数据存储到项目申报库主数据表中，每条数据对应唯一项目编号，与项目间接相关的数据存储到项目申报库各子数据表中，子数据表中将唯一项目编号设置为外键与主数据表关联；申报数据库的子数据表中还存储有历史项目申报信息。

所述直接相关的数据包括项目基本信息；间接相关的数据包括项目简介、主要科技创新、第三方评价、社会经济效益、曾获科技奖励、完成人、完成单位、推荐单位意见、知识产权、论文论著及附件；

所述项目基本信息包括：项目名称、项目学科、技术领域、项目来源及所属国民经济行业等；所述知识产权包括：专利申请号、专利名称、发明人和专利授权日；所述完成人包括：完成人的姓名、身份证号和完成人顺序。所述步骤一中数据存储形式包括：数据表、图片、Word文档及PDF文档。存储为不同格式数据，数据表便于查询、统计，图片及PDF文档确保数据真实性，Word文档为了便于保持数据原有格式，便于查看。

所述步骤三中，对项目申报库各子数据表存储的数据进行分词或者直接匹配，利用判断模块判断当前的申报项目的信息是否为项目名称或论文论著名称，如果是就进入关键词比较模块，如果不是，再进行判断是否为项目的完成人姓名及身份证号或知识产权号，如果是，则进入直接匹配模块。

利用关键词比较模块将当前的申报项目的信息的项目名称或论文论著名称与历史项目申报信息中的另一申报项目的项目名称或论文论著名称的关键词比较，如果相似度不低于设定值，判定重复，否则不重复；

利用直接匹配模块将当前的申报项目的信息项目的完成人姓名及身份证号或知识产权号与历史项目申报信息中的另一申报项目的项目完成人姓名及身份证号或知识产权号直接进行匹配，如果相同判定重复，否则不重复；

利用存储模块将关键词比较模块及直接匹配模块判定不重复申报项目的信息存储到主计算机的缓存区，将判定重复的申报项目的信息存储到主计算机中的项目申报数据库查重表中。

所述关键词比较模块将当前的申报项目的信息的项目名称或论文论著名称与历史项目申报信息中的另一申报项目的项目名称或论文论著名称的关键词比较，如果相似度不低于设定值，判定重复，否则不重复，具体过程为：