[发明专利]分布式异构数据源主成份分析系统在审
申请号: | 201811201027.1 | 申请日: | 2018-10-15 |
公开(公告)号: | CN109359150A | 公开(公告)日: | 2019-02-19 |
发明(设计)人: | 黄刚;张进;王菲 | 申请(专利权)人: | 南京邮电大学 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06F16/27;G06F16/215 |
代理公司: | 南京苏科专利代理有限责任公司 32102 | 代理人: | 姚姣阳 |
地址: | 210003 江苏*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式异构数据 主成份 分析系统 分析 原始数据集 分析单元 判断单元 异构数据 转换单元 属性列 转换 | ||
1.一种分布式异构数据源主成份分析系统,其特征在于,包括:
转换单元,适于将原始数据集转换为对应的分布式异构数据集;所述分布式异构数据集中的每个异构数据集分别具有对应的属性列数;
判断单元,适于判断是否能够对所述分布式异构数据集进行主成份分析;
分析单元,适于当确定能够对所述分布式异构数据集进行主成份分析时,对所述分布式异构数据集执行主成份分析,得到对应的分析结果。
2.根据权利要求1所述的分布式异构数据源主成份分析系统,其特征在于,所述转换单元,适于对所述原始数据集中的数据依次执行语义映射集成、格式映射集成和结果映射集成,得到对应的分布式异构数据集。
3.根据权利要求1所述的分布式异构数据源主成份分析系统,其特征在于,所述判断单元,适于对所述分布式异构数据集中的每个异构数据集分别执行KMO检验,得到对应的KMO检验系数;对所述分布式异构数据集中的每个异构数据集分别执行巴特利球体检验,得到对应的巴特利球体检验P值;当所述分布式异构数据集中的每个异构数据集对应的KMO检验系数和巴特利球体检验P值均大于对应的阈值时,确定能够对所述分布式异构数据集进行主成份分析。
4.根据权利要求1所述的分布式异构数据源主成份分析系统,其特征在于,所述分析单元,适于计算所述分布式异构数据集中的本地异构数据集与非本地异构数据集之间的组合协方差矩阵;基于计算得出的组合协方差矩阵,计算所述非本地异构数据集对应的误差分量;当确定所述非本地异构数据集对应的误差分量大于所述非本地异构数据集的估算值时,将所述非本地异构数据集进行特征值优化,直至优化后的非本地异构数据集对应的误差分量小于优化后的非本地异构数据集的估算值;当优化后的非本地异构数据集对应的误差分量小于优化后的非本地异构数据集的估算值时,计算所述本地异构数据集与优化后的非本地异构数据集之间的组合协方差矩阵,作为所述分布式异构数据集的主成份分析结果。
5.根据权利要求4所述的分布式异构数据源主成份分析系统,其特征在于,所述分析单元,适于采用如下的公式计算所述分布式异构数据集中的本地异构数据集与非本地异构数据集之间的组合协方差矩阵:
其中,Cov[X,Y]表示非本地异构数据集X与本地异构数据集Y之间的组合协方差矩阵,m表示所述分布式异构数据集的属性列数。
6.根据权利要求5所述的分布式异构数据源主成份分析系统,其特征在于,所述分析单元,适于采用如下的公式计算所述非本地异构数据集对应的误差分量:
其中,ε表示非本地异构数据集对应的误差分量,t表示非本地异构数据集的优化次数,σj表示对非本地异构数据集进行SVD分解得到的第j个奇异值,j表示对非本地异构数据集进行SVD分解得到的第j个分量。
7.根据权利要求6所述的分布式异构数据源主成份分析系统,其特征在于,所述分析单元,适于通过Householder三对角化和QR分解将所述非本地异构数据集进行特征值优化。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京邮电大学,未经南京邮电大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811201027.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种模拟测试方法及相关装置
- 下一篇:一种船体分段物流大数据可视化平台