[发明专利]一种基于城市多源异构数据构建城市画像的方法

权利要求书

1.一种基于城市多源异构数据构建城市画像的方法，其特征在于，所述基于城市多源异构数据构建城市画像的方法，包括：

设计城市多源异构数据对应的归一化栅格数据模型，所述归一化栅格数据模型将城市空间划分为多个栅格，根据数据的空间分布，将数据映射到每个对应的栅格中，并对所有栅格进行编号，使用栅格编号作为数据在目标数据库中的空间信息；

从城市多源异构数据接口获取原始数据，对采集的原始数据进行预处理，将预处理结果进行序列化，发布到消息队列的指定内部分类中；

建立城市多源异构数据对应的数据栅格化转换模块，从消息队列的内部分类中提取数据，根据所述归一化栅格数据模型及数据的原始结构、业务特征、时空属性，采用对应算法，对提取的数据进行栅格化转换和数据补全；

将经栅格化转换和数据补全后形成的栅格数据保存到依据归一化栅格数据模型设计的目标数据库，形成城市多源异构数据构成的城市画像，并根据栅格数据的特征，提供相应的数据接口，服务于深度学习算法及智慧城市的应用；

其中，所述根据所述归一化栅格数据模型及数据的原始结构、业务特征、时空属性，采用对应算法，对提取的数据进行栅格化转换和数据补全，包括：

对分布于空间点位坐标，随时间改变，且仅在有限位置具有真实数值的传感数据，将真实数据依据其坐标投影至对应栅格中；

对于分布于空间中，只具有位置属性的数据，分别统计每种数据在每个栅格中的数量，将位置分布数据转化为栅格化的密度分布数据；

对于原始数据已具备栅格特征的数据，将其原始栅格尺寸转换为归一化栅格数据模型中统一尺寸的栅格数据，转换过程将原始栅格数据分布按照类型或数值的百分比，映射到目标栅格中；

利用数据在空间与时间维度的相似性，计算并补全其余栅格中的数据。

2.如权利要求1所述的基于城市多源异构数据构建城市画像的方法，其特征在于，所述目标数据库为栅格数据库，所述栅格数据库包括关系型数据库的实现和非关系型数据库的实现；所述关系型数据库为每一类数据建立单独的数据表，在数据表中，数据对应的栅格编号与时间信息各为数据库中一列，数据中每一属性对应一列；所述非关系型数据库使用行键表示数据属性、时间信息，使用列表示空间信息，列名为栅格编号。

3.如权利要求2所述的基于城市多源异构数据构建城市画像的方法，其特征在于，所述非关系型数据库的行键包括对数据属性采用散列算法编码后获得的字符串，以及数据对应的时间信息。

4.如权利要求1所述的基于城市多源异构数据构建城市画像的方法，其特征在于，所述对采集的原始数据进行预处理，包括：过滤因数据源异常而导致的错误信息。

5.如权利要求1所述的基于城市多源异构数据构建城市画像的方法，其特征在于，所述内部分类根据数据源、或内容、或地点、或时间进行分类建立，每个内部分类对应有预设的标准格式，预设的标准格式包含属性类别、数据存储类型和序列化方式。

6.如权利要求1所述的基于城市多源异构数据构建城市画像的方法，其特征在于，所述从消息队列的内部分类中提取数据，还包括：

对从内部分类中提取的数据，进行去重、去除无关数据的预处理。

7.如权利要求1所述的基于城市多源异构数据构建城市画像的方法，其特征在于，所述目标数据库包括栅格数据库和数据仓库，所述基于城市多源异构数据构建城市画像的方法，包括：

建立城市多源异构数据对应的数据栅格化转换模块，从消息队列的内部分类中提取数据，将提取的数据保存到目标数据库中的数据仓库中。