[发明专利]异构系统节点信息汇总、贸易数据库生成方法和装置

说明书

本发明公开了一种异构系统节点信息汇总方法和装置，采集来自异构系统不同节点的交互动作信息，经统一编码后，对每一条信息进行克隆，即将交互双方对调，交互方向对调，形成一条交互方向相反的交互动作信息，然后对所有信息进行合并和补全形成数据库。合并和补全时，如果两条数据不完全相同，按字段处理，字段内容相等选其一，不等选大者；对于仅有一条的交互动作信息不做处理；本发明还提供了全球贸易数据库生成方法和装置，无数据节点的数据生成方法和装置，以及无数据报道国家的贸易数据库生成方法和装置。采用本发明能够较准确、全面的推算无数据节点的相关数据，且在一定程度修正数据误差。

技术领域

本发明属于信息技术领域，尤其涉及一种异构系统节点信息汇总方法和装置、全球贸易数据库生成方法和装置。

背景技术

大数据时代，如何快速准确识别所需要的数据信息和高效使用这些数据信息，是影响研究、分析、决策等工作效率和效果的关键环节。

但是大数据通常来自异构系统，其不仅存在格式不统一，无法进行对比和汇总的问题，还存在数据缺失的问题。举两个常见的例子：

例1：异构系统的信息汇总

当需要对异构系统进行基于汇总信息的控制时，例如智能体任务分配、车辆的路径规划、网络单元的资源占用、全球金融系统的资金流动等均需要从异构的系统节点中汇总信息。由于节点的异构性，需要对不同节点的信息进行统一化；此外，对与交互信息的汇总，其难点在于，交互双方获得了交互动作，但是其中一方或者双方因为某种原因，没有记录在案，因此缺少了完整、全面的交互信息，导致汇总数据不够清晰。

例2：全球贸易大数据的汇总

目前的全球贸易大数据系统最多能查询160多个国家地区的相关数据，且基本没有较复杂的数据分析功能。如，我国国家信息中心2018年1月最新建立的全球贸易大数据系统是目前最先进的，有129个国家地区的数据，但数据系统仅供129个国家的数据查询和简单的对比分析(如年增长率等)。主要原因是许多小国没有相关数据统计或报道，且数据量过大(如一个国家每年的海关数据就过亿)，很难让数据按照分析使用需要的条件编排。

因此，需要设计一种数据处理方法，不仅可以在一定程度修正数据误差，而且可以较准确、全面的推算无数据节点的相关数据，具有统一编码的数据编排也更容易支持复杂的后续智能分析的需求。

发明内容

有鉴于此，本发明提供了一种异构系统节点信息汇总方法，能够较准确、全面的推算无数据节点的相关数据，且在一定程度修正数据误差。

该方法包括：

步骤一、采集来自异构系统不同节点的交互动作信息；交互动作信息包含编码体系的类型值、交互双方、交互方向、交互内容和交互数量；

步骤二、对采用不同编码体系的交互动作信息进行统一编码：

针对交互动作信息中除了编码体系的每个字段X按照其特点进行不同的编码统一处理：

a、如果数据来源的编码方式相同，则沿用该编码方式；

b、如果数据来源的编码方式属于具有补充关系的几个版本，则选用最新版本，对字段X进行修改；

c、如果数据来源的编码方式不同，且以其中一种编码方式为基准，建立其余编码方式与基准编码方式之间的编码计算关系，以基准编码方式为交互动作信息在数据库中的记载方式；步骤一收集交互动作信息后，根据交互动作信息中的编码体系字段提取相应的编码计算公式，计算得到基准编码作为字段X的统一编码；