[发明专利]一种基于可加模型的多源异构数据融合架构系统

摘要

本发明提供一种基于可加模型的多源异构数据融合架构系统，包括多源异构数据预处理模块、多源异构数据融合模块、模型加和模块。所述架构系统工作时，通过从预先创建的元模型库中调取匹配的元模型，能够对各种不同格式的数据进行处理，并通过模型加和部件实现数据融合。本发明可有效解决多源异构数据处理过程中容易出现的数据丢失、需根据数据源的格式与目标数据源格式做适配的问题，同时还能分析每个新加入的外部数据源对目标领域问题的贡献，能够实现海量异构数据的高速处理和分析。

主权项

1.一种基于可加模型的多源异构数据融合架构系统，其特征在于，包括：多源异构数据预处理模块、多源异构数据融合模块、模型加和模块；所述多源异构数据预处理模块包括多源异构数据分类模块和多源异构数据提取模块，其中，多源异构数据分类模块用于对数据库中不同类型的数据进行分类，多源异构数据提取模块用于提取多源异构数据；所述多源异构数据融合模块包括元模型调取模块和元模型部件，其中，所述元模型调取模块用于从预先创建的元模型库中调取与每个所述多源异构数据相匹配的元模型部件，所述元模型部件用于对多源异构数据进行处理，得到一个评分；所述模型加和模块用于将所有评分进行加和，得到一个总评分，并分析总评分对目标变量的解释性；所述总评分为通过所述架构系统分析所得的结果；所述元模型库包括若干个适用于不同数据类型的元模型部件，所述元模型库的创建过程包括如下步骤：1)确定目标变量；2)设定初始值作为第一个评分，分析目标变量与初始值之间的误差；3)使用所述多源异构数据提取模块提取现有数据库的一个数据，根据数据类型确定一个元模型部件，使用该元模型部件处理该数据，得到一个评分；4)分析步骤3)所得评分与步骤3)前一误差之间的差值，分析该差值是否超出设定的阈值；若是，则通过误差回传部件回传所述差值，对步骤3)中所用元模型部件进行更新，并重新处理步骤3)中数据，得到一个评分，新得到的评分能够更好地解释步骤3)前一误差；若否，则继续下一步骤；5)使用模型加和部件将步骤4)中处理所得评分与步骤3)前的所有评分进行加和，分析所得总评分与目标变量间的误差；6)重复步骤3)至5)，通过处理数据库中每一类型的数据，得到一个评分和一个误差，同时得到一个相应的元模型部件；步骤6)中最终得到的所有元模型部件构成所述元模型库；所述误差回传部件用于根据步骤4)中所述差值对所述元模型部件进行更新修正。