[发明专利]数据模型的构建方法、装置及计算机可读存储介质

说明书

本发明涉及一种大数据技术，揭露一种数据模型的构建方法，包括：从多个预设数据源获取预设类型数据，再将预设类型数据转化为标准化数据，并基于标准化数据构建标准化数据池，接着，确定多个虚拟标签及各个虚拟标签对应的数据提取规则，根据数据提取规则，从标准化数据池提取各个虚拟标签对应的标准化数据，并基于各个虚拟标签对应的标准化数据构建虚拟标签池，最后，从标准化数据池及虚拟标签池中选出核心数据，并基于核心数据构建多个核心数据域，并从各个核心数据域对应的核心数据中提取待处理数据，将所述待处理数据进行组合，形成多个融合数据域。本发明解决了智慧城市数据汇集过程中数据统计口径的不一致、取数困难的问题。

技术领域

本发明涉及大数据技术领域，尤其涉及一种数据模型的构建方法、装置、电子设备和计算机可读存储介质。

背景技术

智慧城市是指利用各种信息技术或创新概念，将城市的系统和服务打通、集成，以提升资源运用的效率，优化城市管理和服务，以及改善市民生活质量。

随着科技的不断发展，智慧城市的数据不断汇聚累积，以及大数据、人工智能、区块链等各类技术的深度应用，强化数据共性能力整合和统一赋能，成为消除数据孤岛、支撑上层业务条块联动的必然选择。但长期以来智慧城市数据整合缺乏有效的理论和技术方法，没有建立统一的智慧城市数据模型构建的方法，从而造成智慧城市数据汇集过程中数据统计口径的不一致、取数困难的问题。

发明内容

本发明的主要目的是提供一种数据模型的构建方法、装置、电子设备和计算机可读存储介质，旨在解决智慧城市数据汇集过程中数据统计口径的不一致、取数困难的问题。

为实现上述目的，本发明提供一种数据模型的构建方法，该方法包括：

从多个预设数据源获取预设类型数据，并基于所述预设类型数据构建归集联合数据池；

将所述归集联合数据池中的预设类型数据转化为标准化数据，并基于所述标准化数据构建标准化数据池；

确定多个虚拟标签及各个虚拟标签对应的数据提取规则，根据各个虚拟标签对应的数据提取规则，从所述标准化数据池提取各个虚拟标签对应的标准化数据，并基于各个虚拟标签对应的标准化数据构建虚拟标签池；

从所述标准化数据池及虚拟标签池中选出核心数据，并基于所述核心数据构建多个核心数据域；

从各个核心数据域对应的核心数据中提取待处理数据，并将所述待处理数据进行组合，形成多个融合数据域。

可选地，所述预设类型数据包括多个字段，所述将所述归集联合数据池中的预设类型数据转化为标准化数据，包括：

从所述预设类型数据中选择待处理字段；

读取所述待处理字段的字段名，并根据所述字段名于预设标准数据元库中查找对应的标准数据元；

从查找到的标准数据元中读取数据元的名称、定义、标识、表示和允许值，并从所述归集联合数据池中获取所述待处理字段的定义、标识、表示和允许值；

将所述待处理字段的字段名、定义、标识、表示和允许值分别与读取的所述数据元的名称、定义、标识、表示和允许值进行对比，以确定是否存在差异；

当存在差异时，按照读取的所述数据元的名称、定义、标识、表示和允许值，对所述待处理字段的字段名、定义、标识、表示和允许值进行修改。

可选地，所述根据各个虚拟标签对应的数据提取规则，从所述标准化数据池提取各个虚拟标签对应的标准化数据，并基于各个虚拟标签对应的标准化数据构建虚拟标签池，包括：

从各个数据提取规则中提取各个虚拟标签对应的结构化查询语句；

根据各个虚拟标签对应的结构化查询语句，在所述标准化数据池中查询各个虚拟标签对应的标准化数据；