[发明专利]一种数据采集方法

说明书

本发明公开了一种数据采集方法，包括：步骤一：根据数据源信息，配置数据连接池，步骤二：根据步骤一中提供的数据连接池，建立私有的数据连接安全通道，步骤三：按照数据采集要求，通过步骤二的数据通道进行数据提取，提取过程中，遵循特定的逻辑与步骤，确保数据准确与完整，步骤四：将步骤三的数据按照标准化模型进行处理，入库，步骤五：对步骤四中入库数据进行特定的格式化处理、分解、合并。本发明有效的整合了原有数据或者新建业务系统的时候统一需要从数据底层规划，明确了数据如何入库、汇总、建立私有通道、挖掘、分析，建立有效分析模型，为科学决策、精准培养、高效管理提供技术保障。

技术领域

本发明属于数据采集技术领域，具体涉及一种数据采集方法。

背景技术

当前，随着网络技术、云计算包括信息的搜索引擎和各种存储等一系列信息化的高速发展，大数据已成为服务决策、提高管理效益的趋势和途径，对教育管理、学校管理产生重大影响。对职业教育而言，要摸清职业学校基础，动态掌握职业学校发展变化，服务国家决策，服务地方发展，服务学校管理，亟需加强职业学校管理信息化，运用现代化管理手段和信息化管理工具，建设以应用为基础、以数据为支撑的学校管理信息系统，提供准确、实时、动态的大数据，为今后的数据钻取挖掘，职业教育趋势分析和发展方向研究奠定科学基础。

目前对于职业教育全貌了解缺乏历史数据的佐证材料，数据失真严重，盲目评价、主观管理等问题依然普遍存在，也没有建设统一的质量监测评价系统，严重影响了中职学校自主质量保障体系的建设的问题，为此我们提出一种数据采集方法。

发明内容

本发明的目的在于提供一种数据采集方法，以解决上述背景技术中提出的问题。

为实现上述目的，本发明提供如下技术方案：一种数据采集方法，包括：

步骤一：根据数据源信息，配置数据连接池；

步骤二：根据步骤一中提供的数据连接池，建立私有的数据连接安全通道；

步骤三：按照数据采集要求，通过步骤二的数据通道进行数据提取，提取过程中，遵循特定的逻辑与步骤，确保数据准确与完整；

步骤四：将步骤三的数据按照标准化模型进行处理，入库；

步骤五：对步骤四中入库数据进行特定的格式化处理、分解、合并，按照数据所代表的特定含义采用指定的挖掘算法进行处理和统计汇总，并将统计分析结果数据以指定的图表(如管理仪表盘、散点图、线形图、柱状图等)方式动态展现；

步骤六：将所述统计分析结果数据最终存储于数据中心库中。

进一步的，所述步骤一中数据源信息分别为中等职业学校人才培养工作状态数据管理系统数据库、高等职业学院人才培养工作状态数据管理系统数据库。

进一步的，所述步骤二中数据连接安全通道为加密式设计，通过特定的符号、数字或其组合进入通道内。

进一步的，所述步骤三中数据采集要求为使用者设定数据区域，用于短时间内将使用者设定区域数据从数据库中提取，供使用者筛选。

进一步的，所述步骤四中标准化模型用于对收集数据进行分析处理，处理方法包括：过滤残次、数据签名不符、业务数据前后逻辑冲突、超过合理取值范围的数据，对提取数据进行标准化分析后录入数据库。

进一步的，所述步骤六中数据中心库支持数据的查询和导出等功能，且所述数据中心库与国家诊改专委会中职数据中心的数据对接、融合交换，用于共享国家平台中允许公开和推送的数据。

进一步的，所述中职人才培养工作状态数据管理系统数据库包括：省级直属中职学校数据库、地市属中职学校数据库、技工类中职学校数据库、民办类中职学校数据库。