[发明专利]一种基于财政大数据的分布式内容查重预警系统

摘要

本发明公开了一种基于财政大数据的分布式内容查重预警系统及方法，包括项目申报系统、内容预警模型中心、内容分析引擎、大数据管理平台、信息推送中心、任务调度中心。本发明优点在于基于大数据管理系统，建立统一的申报项目库、工商库；基于分布式计算技术的内容分析引擎，支持基于项目库与工商库的大规模申报内容数据的快速查重分析，可以利用多服务器算力进行快速计算，快速的计算出申报内容的相似值，系统实用性强、查重效率高、结果安全可靠。

主权项

1.一种基于财政大数据的分布式内容查重预警系统，其特征在于，包括财政大数据库、项目申报模块、内容预警模块、内容分析引擎、信息推送中心、任务调度中心，其中：财政大数据库，与工商数据库及项目申报数据库通讯连接，财政大数据库对采集到的项目申报主体的工商数据与项目申报数据进行清洗、加工、分类形成工商主题库与项目类主题库；项目申报模块，用于用户申报专项资金项目；内容预警模块，设定内容相似性预警的警戒线数值以及与之对应的预警级别；内容分析引擎，引擎核心分为两个部分，中文分词算法与内容相似度算法；信息推送中心，将预警的信息按管理的不同要求进行精准推送；任务调度中心，负责调度相应的处理算法与功能执行任务。