[发明专利]基于大数据构架的医疗数据管理方法及系统

权利要求书

1.一种基于大数据构架的医疗数据管理方法，其特征在于，所述方法包括：

搭建数据中台dataLake数据湖，管理所有的采集数据、分析过程数据、分析模型及分析结果数据、作业调度，支撑整个平台上所有数据的分析流程顺畅进行；

搭建大数据采集平台，所述大数据采集平台基于开源的异构数据同步引擎，针对不同数据类型创建的数据接口，拓展不同的读写插件，将采集的数据经预处理后分门类别地存储至大数据中心；

搭建大数据计算平台，所述大数据计算平台将采集的数据以混合式存储方式进行存储，并对已经存储好的数据利用Spark计算引擎提供数据分析和挖掘；

搭建大数据服务平台，所述大数据服务平台对大数据中心的信息进行统一管理和监控，所述大数据中心的信息包括数据库总数、数据总数、总容量、基础表及合成表的整体信息；

搭建大数据交换平台，所述大数据交换平台统一管理医院的大数据中心与院内业务系统以及院外其他信息平台之间的信息交换；

搭建大数据应用平台，所述大数据应用平台用于直接对所述大数据中心的信息进行查询，并将分析结果以多种不同的图表进行展现。

2.根据权利要求1所述的基于大数据构架的医疗数据管理方法，其特征在于，所述大数据采集平台还用于：

支持对不同类型的数据库包括Mysql、Postgresql、Clickhouse、Oracle、Sqlserver的数据源进行采集；

支持将采集的数据写入到hive、Mysql、Postgresql、Clickhouse、Oracle、Sqlserver；

支持配置读写的速度，避免读写任务占用过多服务器资源，影响业务应用；

支持通过可视化界面指定采集的数据源，通过勾选需要抽取的数据表对数据表进行预览，通过勾选指定数据表下的数据字段锁定要抽取的数据范围；

支持对无主键的数据源表自定义设置主键，大数据中心将根据主键去重；

支持利用SQL语句在已经制定的数据范围基础上精细化设置采集条件；

支持通过可视化界面设置工作流的方式，直接对数据采集和处理的整个流程进行设置。

3.根据权利要求1所述的基于大数据构架的医疗数据管理方法，其特征在于，所述大数据服务平台还用于：

支持在基础表的基础上，通过编写SQL语句的方式快速生成新的合成表，且能查看合成表与基础表之间的血缘关系；

支持对数据中心发起的调度任务进行统一监控，并以图表形式对整体情况进行展示；

支持对数据采集过程中出现违规操作时提供及时的预警；

支持对采集的数据进行数据校验和数据监控，保证数据中心信息的准确性。

4.根据权利要求1所述的基于大数据构架的医疗数据管理方法，其特征在于，所述大数据应用平台还用于：

支持通过编写SQL查询语句从数据源中预览数据，并拖拉拽生成数据模型；

支持通过报表可进行不同层级的上下钻取包括多条数据同时钻取以及直接在界面上追溯生成报表的SQL统计语句；

支持多种数据源、多种图表的接入；

支持自定义数据隔离，以维度为最小颗粒度控制数据隔离，可根据不同的用户过滤统计的数据。

5.根据权利要求1-4任一项所述的基于大数据构架的医疗数据管理方法，其特征在于，所述搭建数据中台dataLake数据湖的步骤还包括：

所述dataLake数据湖的API为UI层提供接口服务，将系统配置、资源中心、数据处理及数据管理的工作流配置保存更新到数据库中；

API层获取对接的数据源的元信息，存放到es全文检索引擎，便于后续快速定位数据资产，以及消息推送、集群监控，Master和Worker节点在部署创建时会在ZooKeeper上注册临时节点，并在心跳包中往临时节点中存储服务器信息。

6.根据权利要求5所述的基于大数据构架的医疗数据管理方法，其特征在于，Master集群支持高可用配置，且所述Master集群中维护了多种守护线程用于监听其他Master和Worker的状态。