[发明专利]一种新媒体一体化运营管理用数据采集分析系统

说明书

本发明涉及新媒体数据分析技术领域，尤其涉及一种新媒体一体化运营管理用数据采集分析系统；包括：资源管理模块、数据采集模块、数据存储模块、数据处理模块、数据分析模块、数据管理模块、应用服务模块；数据分析模块用于数据的抽取、转换、清洗和加载处理，提供数据检查规则定义、数据质量报告、计划任务管理、异常管理功能，及时对数据处理方案定义，实现海量数据的加载。本发明数据调取方便，数据处理逻辑路线短，数据处理速度快，在数据处理过程中可以在过程中实现多种任务操作。

技术领域：

本发明涉及新媒体数据分析技术领域，尤其涉及一种新媒体一体化运营管理用数据采集分析系统。

背景技术：

新媒体产业是指以数字技术、计算机网络技术和移动通信技术新兴技术为依托，以网络媒体、手机媒体、互动性电视媒体、移动电视、楼宇电视新兴媒体和新型媒体为主要载体，按照工业化标准进行生产、再生产的产业类型，是文化创意产业的重要组成部分。集成播控平台是在新媒体产业大发展的环境下，由广播电视机构负责的内容播出的控制和管理平台。

新媒体一体化运营管理过程中，需要对不同的数据进行采集，现有数据采集分析中心的结构单一，数据调取处理不方便，数据处理分析速度慢，不能满足新媒体一体化运营要求。

发明内容：

本发明目的是提供一种新媒体一体化运营管理用数据采集分析系统，至少解决现有的数据采集分析中心的结构单一，数据调取处理不方便，数据处理分析速度慢，不能满足新媒体一体化运营要求的问题。

为了实现上述目的，本发明采用以下技术方案予以实现：

一种新媒体一体化运营管理用数据采集分析系统，包括：资源管理模块、数据采集模块、数据存储模块、数据处理模块、数据分析模块、数据管理模块、应用服务模块；

所述资源管理模块用于操作系统的安装部署和硬件虚拟化、大数据群的自动化部署；

数据采集模块用于对IPTV、网站、微信矩阵以及移动客户端各平台用户的访问、浏览、点击情况进行采集；

数据存储模块用于存储采集数据及处理结果数据；

数据处理模块用于对采集数据的清洗与管理、用户数据的生产、过滤条件的管理，以及对用户数据的计算、分析与处理；

数据分析模块用于数据的抽取、转换、清洗和加载处理，提供数据检查规则定义、数据质量报告、计划任务管理、异常管理功能，及时对数据处理方案定义，实现海量数据的加载；

数据管理模块用于将获取到的数据进行基于各种算法的建模与挖掘；

应用服务模块用于将数据分析结果应用到决策过程中以解决实际问题，数据分析的结果最终要提供给外部客户和公司内部使用。

进一步的，所述资源管理模块包括操作系统的自动部署单元和大数据群的自动部署单元；

所述数据采集模块包括终端采集单元、认证配置单元、前置采集单元、中心数据汇聚单元、分布式存储与计算单元和实时统计单元；

所述数据存储模块包括分布式存储系统单元、分布式数据库单元、关系型数据库单元；

所述数据处理模块包括并行数据采集和导出单元、流程管理单元、云数据管理单元、实时数据采集单元；

所述数据分析模块包括分析引擎单元、分布式计算引擎单元、流计算引擎、实时数据处理单元；

所述数据管理模块包括第三方数据管理单元、媒体数据中心数据管理单元；

所述应用服务模块包括用户服务单元、电视台内部服务单元、企业政府服务单元。