[发明专利]一种基于分布式处理的数据智能分析方法在审
申请号: | 202110775157.1 | 申请日: | 2021-07-07 |
公开(公告)号: | CN113672379A | 公开(公告)日: | 2021-11-19 |
发明(设计)人: | 杨声英;陆思芬;胡海霞;张桂花;郭晓丹;罗亚丽;段雨梅;张仁国 | 申请(专利权)人: | 四川大学锦城学院 |
主分类号: | G06F9/50 | 分类号: | G06F9/50;G06F21/60;G06F21/62;G06F21/64 |
代理公司: | 成都时誉知识产权代理事务所(普通合伙) 51250 | 代理人: | 田高洁 |
地址: | 610000 *** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 分布式 处理 数据 智能 分析 方法 | ||
1.一种基于分布式处理的数据智能分析方法,其特征在于,包括以下步骤:
S1:分布式数据处理中心建立加密数据库,密钥管理中心生成加密密钥,并根据加密密钥对加密数据库内数据进行加密;
S2:客户端向分布式数据处理中心发出访问请求数据;
S3:分布式数据处理中心接收到访问请求数据后,根据分布式数据处理内部预存的访问信息数据库对访问请求数据进行需求分析,若分析后发现访问请求数据中的数据为错误数据,则进入步骤S4,若分析后发现访问请求数据中的数据为有损数据,则执行步骤S5,若分析后发现访问请求数据中的数据为正确数据,则进入步骤S6;
S4:将错误数据删除;
S5:对有损数据进行缺失值填补,将填补后的访问请求数据发送到分布式数据处理中心重新进行需求分析;
S6:分布式数据处理中心根据客户端的访问请求数据,并基于自身加密数据库内设的公钥对访问请求数据进行认证,若认证通过,则进入步骤S7,若认证未通过,则将该访问请求数据判定为错误数据,并进入步骤S4;
S7:分布式数据处理中心将访问请求数据发送到加密服务器,加密服务器验证客户是否有权限访问请求的数据库内容,验证通过则进入步骤S8,若验证未通过,则将该访问请求数据判定为错误数据,并进入步骤S4;
S8:分布式数据处理中心从加密数据库中提取加密文件,根据加密密钥对加密文件进行解密,解密后的数据通过安全套阶层协议加密信道传输给客户端。
2.根据权利要求1所述的一种基于分布式处理的数据智能分析方法,其特征在于,所述S3步骤中将访问请求数据被判断为有损数据后,进行以下步骤:
S31:分布式数据处理中心将有损数据存入热数据存储节点中,并设定存储时长s1;
S32:若分布式处理中心监测到在s1时长未计满时,热数据存储节点中的有损数据收到填补请求,则进入步骤S5,被读取若分布式处理中心监测到在s1时长计满后,热数据存储节点中的有损数据未收到填补请求,则进入步骤S33;
S33:分布式处理中心将未被读取的有损数据存入冷数据存储节点中,并设定存储时长s2,其数值选取遵循以下原则:s2>>s1;
S34:若分布式处理中心监测到s2时长未计满时,冷数据存储节点中的有损数据收到填补请求,则进入步骤S5,若分布式处理中心监测到s2时长计满后,冷存储节点中的有损数据仍未被读取,则进入步骤S4。
3.根据权利要求6所述的一种基于分布式处理的数据智能分析方法,其特征在于,所述冷数据存储节点的配置高于所述热数据存储节点的配置。
4.根据权利要求2所述的一种基于分布式处理的数据智能分析方法,其特征在于,所述步骤S5中,对有损数据进行缺失值填补时可采用均值插补、利用同类均值插补、极大似然估计、多重插补中的一个或多个缺失值填补方法。
5.根据权利要求1所述的一种基于分布式处理的数据智能分析方法,其特征在于,所述步骤S6中,分布式数据处理中心基于自身加密数据库内设的密钥对访问请求数据进行认证时,还包括以下步骤:。
S61:依据步骤S3中正确数据的填补数据值长度,分布式数据处理中心设定第一规则,建立访问请求数据的第一数据列,第一规则将正确数据根据填补值长度从少到多进行排序,根据第一规则对第一数据列中的数据进行优先级排列,得到第一数据列中的优先处理信息;
S62:依据步骤S3中访问请求数据被判断为正确数据的时间点,分布式数据处理中心设立第二规则,第二规则根据访问请求数据被判断为正确数据的时间点从先至后进行排序,根据第二规则对第一优先处理信息进行排序,得出第一处理数据;
S63:分布式数据处理中心通过第一分布式数据处理节点对第一数据切片处理,生成多个子数据;
S64:提取多个子数据的标识信息,对处理多个子数据的第二分布式数据处理节点进行分配,得出访问请求数据的认证顺序。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于四川大学锦城学院,未经四川大学锦城学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110775157.1/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置