[发明专利]一种基于多维分析技术的数据质量健康度分析方法及系统有效
申请号: | 202110724753.7 | 申请日: | 2020-11-27 |
公开(公告)号: | CN113407517B | 公开(公告)日: | 2022-02-11 |
发明(设计)人: | 金震;王兆君;康进港;李明;曹朝辉 | 申请(专利权)人: | 北京三维天地科技股份有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/215;G06F16/28 |
代理公司: | 北京冠和权律师事务所 11399 | 代理人: | 赵银萍 |
地址: | 100000 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 多维 分析 技术 数据 质量 健康 方法 系统 | ||
1.一种基于多维分析技术的数据质量健康度分析方法,其特征在于,包括以下步骤:
获取第一数量个目标业务数据样本;
利用预设相似度对比规则、预设完整性评估规则、预设唯一性评估规则和预设关联性评估规则来构建数据分析模型;
接收目标用户选择的目标评估类型,根据所述目标评估类型利用所述数据分析模型对所述第一数量个目标业务数据样本进行分析评估,生成质量健康度分析报告;
将所述质量健康度分析报告以图形化的格式进行展示;
其中,所述目标评估类型为:相似度评估、完整性评估、唯一性评估和关联性评估中的一种或者多种;
所述利用预设相似度对比规则、预设完整性评估规则、预设唯一性评估规则和预设关联性评估规则来构建数据分析模型,包括:
构建初始网络模型;
在所述初始网络模型中设置四个网络节点;
将所述预设相似度对比规则、预设完整性评估规则、预设唯一性评估规则和预设关联性评估规则分别与所述四个网络节点进行对应;
对应完毕后,检测每个网络节点的稳定性;
当每个网络节点的稳定性都合格时,确认所述始网络模型收敛,获得所述数据分析模型;
所述对应完毕后,检测每个网络节点的稳定性,包括:
获取预设时长内每个节点心跳检测超时的次数;
将心跳检测超时的次数按照从多到少的顺序将所述四个网络节点进行排序,获取排序结果;
确定所述排序结果中每个网络节点的网络连接状态;
当每个网络节点的网络连接状态为通畅时,判断所述四个网络节点的工作状态正常,当有任意一个网络节点的网络连接状态为断开时,确定断开网络的第一目标网络节点,判断所述第一目标网络节点的工作状态异常,生成异常报告进行显示,判定所述第一目标网络节点的稳定性差;
当判断每个网络节点的工作状态都为正常时,将每个网络节点作为发起节点;
将每个发起节点的第一资源占用状态发送至其相邻网络节点;
强行关闭每个发起节点的第一资源占用状态,确认其相邻网络节点所接收的第一资源占用状态是否发生改变;
若发生改变,检测所述相邻网络节点的第二资源占用状态是否与第一资源占用状态相同,若是,确认所述相邻网络节点异常,判定所述相邻网络节点稳定性差,否则,确认所述网络节点正常;
当确认所述网络节点正常时,同时启动所述四个网络节点,确认每个网络节点之间是否有干扰情况发生,若是,将相互出现干扰情况的第二目标网络节点进行标记,判定所述第二目标网络节点的稳定性差,否则,确认所述网络节点工作模式正常;
检测所述每个网络节点输出的目标数据和预设数据的异同,若每个网络节点输出的目标数据都与预设数据相同,确认所述网络节点的输出数据精度正常,判定所述每个网络节点的稳定性为优秀,若有任一网络节点的输出的目标数据与预设数据不相同时,提取出输出的目标数据与预设数据不相同的第三目标网络节点,判定所述第三目标网络节点的稳定性差。
2.根据权利要求1所述基于多维分析技术的数据质量健康度分析方法,其特征在于,在获取第一数量个目标业务数据样本之前,所述方法还包括:
通过预设条件确定数据样本的第一数量;
基于所述第一数量确定状态函数;
根据所述状态函数确定筛选条件,在第二数量个初始业务数据样本中筛选出满足所述筛选条件的第一数量个初始业务数据样本,其中,所述第二数量大于所述第一数量;
将所述第一数量个初始业务数据样本确认为所述第一数量个目标业务数据样本。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京三维天地科技股份有限公司,未经北京三维天地科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110724753.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种适合毛豆生长的施肥方法
- 下一篇:预测白酒储存年份的方法