[发明专利]轻量级多源异构数据融合方法及系统

权利要求书

1.轻量级多源异构数据融合方法，其特征在于，包括：

对电网中的所有数据源进行分类得到主数据源和从数据源，若判断从数据源为多个，则获取每个从数据源所对应的数据主体，将具有相同数据主体的从数据源归类为一个从数据集合；

依次获取每一个主数据源的数据主体，确定与所述数据主体相对应的从数据集合，根据所述数据主体在主数据源的主数据属性以及从数据集合中的至少一个从数据属性，生成相对应的多源异构模板；

基于所述多源异构模板对主数据源和从数据源内相对应的主电力数据、从电力数据进行轻量化的采集融合，得到每个数据主体的多源异构数据；

根据每个多源异构数据的数据结构对所有的多源异构数据进行分类，获取具有不同数据结构的多源异构数据中的差异结构数据，根据所述差异结构数据生成相应多源异构数据的差异标签；

根据所述差异标签生成不同的数据结构存储单元，将多个数据主体的多源异构数据根据其数据结构存储至具有不同差异标签的数据结构存储单元内；

所述依次获取每一个主数据源的数据主体，确定与所述数据主体相对应的从数据集合，根据所述数据主体在主数据源的主数据属性、以及从数据集合中的至少一个从数据属性，生成相对应的多源异构模板，包括：

获取初始化数据模板，所述初始化数据模板包括主体槽位、主数据槽位以及从数据槽位；

获取每一个主数据源的数据主体，将所述数据主体填充至所述主体槽位处，对所述主数据槽位的数量进行调整得到与所述主数据源的数量相对应的主数据槽位；

对所述从数据槽位的数量进行调整得到与所述从数据源的数量相对应的从数据槽位；

基于所述主数据源的主数据属性、从数据源的从数据属性，在所述主数据槽位以及从数据槽位处分别建立主数据采集单元格和从数据采集单元格，生成多源异构模板；

所述基于所述主数据源的主数据属性、从数据源的从数据属性，在所述主数据槽位以及从数据槽位处分别建立主数据采集单元格和从数据采集单元格，生成多源异构模板，包括：

基于所述主数据源的主数据属性在所述主数据槽位处建立至少一个维度的主数据采集栏目，所述主数据采集栏目包括主数据采集单元格；

基于所述从数据源的从数据属性在所述从数据槽位处建立至少一个维度的从数据采集栏目，所述从数据采集栏目包括从数据采集单元格；

在每个数据主体所对应的初始化数据模板中分别建立与所有主数据源、从数据源对应的主数据采集单元格、从数据采集单元格后，对所述初始化数据模板轻量化处理，生成相对应的多源异构模板；

所述在每个数据主体所对应的初始化数据模板中分别建立与所有主数据源、从数据源对应的主数据采集单元格、从数据采集单元格后，对所述初始化数据模板轻量化处理，生成相对应的多源异构模板，包括：

获取所述主数据采集单元格和/或从数据采集单元格分别所对应的维度信息；

基于轻量转化表对所有的维度信息进行轻量转化处理，使得主数据采集单元格和/或从数据采集单元格的每个维度信息转化为唯一相对应的维度字符；

将所述维度字符对初始化数据模板中相对应的维度信息进行替换，生成相对应的多源异构模板；

所述基于轻量转化表对所有的维度信息进行轻量转化处理，使得主数据采集单元格和/或从数据采集单元格的每个维度信息转化为唯一相对应的维度字符，包括：

获取所有轻量转化表内的所有维度字符，按照所述维度字符长度对所有的维度字符进行升序排序得到字符排序表；

获取所有的主数据采集单元格内的维度信息的第一数量，选取字符排序表中前部与所述第一数量相对应的维度字符作为第一子字符表；

将字符排序表中与所述第一子字符表相对应的维度字符删除，得到第一更新子排序表；

获取所有的从数据采集单元格内的维度信息的第二数量，选取第一更新子排序表的前部与所述第二数量相对应的维度字符作为第二子字符表；

基于所述第一子字符表确定与所述主数据采集单元格的维度信息相对应的维度字符，基于所述第二子字符表确定与所述从数据采集单元格的维度信息相对应的维度字符；

所述基于所述多源异构模板对主数据源和从数据源内相对应的主电力数据、从电力数据进行轻量化的采集融合，得到每个数据主体的多源异构数据，包括：

确定每一个多源异构模板所对应的数据主体，采集所述主数据源和/或从数据源内与所述数据主体的维度信息相对应的电力标量值和/或电力备注信息，所述电力标量值和/或电力备注信息属于所述主电力数据和/或从电力数据；

若判断每一个多源异构模板的所有主数据采集单元格和/或从数据采集单元格内分别填充有相对应的电力标量值和/或电力备注信息后，则判断得到相对应数据主体的多源异构数据。