[发明专利]一种基于云计算的企业大数据分析处理系统有效
申请号: | 202010757849.9 | 申请日: | 2020-07-31 |
公开(公告)号: | CN111930800B | 公开(公告)日: | 2021-09-24 |
发明(设计)人: | 马少才;张小妮 | 申请(专利权)人: | 东方财富证券股份有限公司 |
主分类号: | G06F16/2458 | 分类号: | G06F16/2458;G06F16/26 |
代理公司: | 上海天协和诚知识产权代理事务所 31216 | 代理人: | 吴立斐 |
地址: | 851400 西藏自治*** | 国省代码: | 西藏;54 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 计算 企业 数据 分析 处理 系统 | ||
1.一种基于云计算的企业大数据分析处理系统,其特征在于,包括:
示例数据获取模块,用于获取各企业目标数据库对应的示例数据;
数据类型获取模块,用于根据所述示例数据确定各企业目标数据库存储的数据类型;
企业数据获取模块,用于获取各企业目标数据库中存储的企业数据;
企业数据集合构建模块,用于构建企业数据集合,各企业数据集合与各企业目标数据库一一对应,所述企业数据集合包括对应的企业目标数据库中存储的企业数据,所述企业数据集合以对应的企业目标数据库存储的数据类型作为企业数据集合的名称;
存储地址分配模块,用于根据预设的初始分配机制对各企业数据集合进行分配,得到各企业数据集合分配的初始存储地址,其中,所述初始分配机制包括各数据类型所对应的初始存储地址,所述初始存储地址为云存储地址或者本地存储地址;将分配到云存储地址的企业数据集合定义为第一企业数据集合,将分配到本地存储地址的企业数据集合定义为第二企业数据集合;
数据存储模块,用于根据所述云存储地址将所述第一企业数据集合存储至云端,根据所述本地存储地址将所述第二企业数据集合存储至本地;
存储关系构建模块,用于构建存储关系,所述存储关系包括各企业数据集合对应的数据类型与存储地址的对应关系;
可视化指令接收模块,用于接收可视化指令,所述可视化指令包括需要进行可视化的目标数据类型;
企业数据可视化模块,用于根据所述可视化指令和所述存储关系,确定所述目标数据类型所对应的目标存储地址,从所述目标存储地址中获取与目标数据类型相对应的目标企业数据集合,并进行可视化;
可视化次数确定模块,用于根据各次可视化过程,获取各企业数据集合在预设时间段内的可视化次数;以及
第一存储位置变更模块,用于比较各企业数据集合在预设时间段内的可视化次数与预设高次数阈值,得到可视化次数大于或者等于所述预设高次数阈值的企业数据集合,获取所述可视化次数大于或者等于所述预设高次数阈值的企业数据集合中的第一企业数据集合,将获取到的第一企业数据集合从所述云端转移存储至所述本地,并更新所述存储关系;
所述企业大数据分析处理系统还包括第二存储位置变更模块,所述第二存储位置变更模块用于比较各企业数据集合在预设时间段内的可视化次数与预设低次数阈值,得到可视化次数小于或者等于所述预设低次数阈值的企业数据集合,获取所述可视化次数小于或者等于所述预设低次数阈值的企业数据集合中的第二企业数据集合,将获取到的第二企业数据集合从所述本地转移存储至所述云端,并更新所述存储关系;其中,所述预设低次数阈值小于所述预设高次数阈值;
所述企业数据获取模块具体用于:
根据所述各企业目标数据库存储的数据类型生成与所述各企业目标数据库对应的企业数据获取脚本文件;
调用所述企业数据获取脚本文件,获取各企业目标数据库中存储的企业数据;
所述企业大数据分析处理系统还包括:
企业数据提取指令获取模块,用于获取企业数据提取指令,所述企业数据提取指令包括待提取的企业数据集合的数据类型;
企业数据提取模块,用于根据所述企业数据提取指令和所述存储关系,确定所述待提取的企业数据集合的数据类型所对应的存储地址,从确定得到的存储地址中获取待提取的企业数据集合;
密钥文件请求模块,用于向后台服务器发送密钥文件获取请求,以指示所述后台服务器生成并返回用于加密的密钥文件;
密钥文件接收模块,用于接收所述后台服务器返回的所述密钥文件;
加密模块,用于根据所述密钥文件,对所述待提取的企业数据集合进行加密,并对加密后的待提取的企业数据集合进行压缩打包,得到加密企业数据包;以及
企业数据输出模块,用于输出所述加密企业数据包;
获取到加密企业数据包之后,从后台服务器获取密钥文件,先对加密企业数据包进行解压缩,得到加密后的待提取的企业数据集合,然后根据密钥文件中的解密密钥对加密后的待提取的企业数据集合进行解密,得到待提取的企业数据集合;
其中加密的过程为:
首先,提取密钥文件中的加密密钥;
然后,根据加密密钥,对待提取的企业数据集合进行加密;
最后,删除接收到的后台服务器返回的密钥文件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东方财富证券股份有限公司,未经东方财富证券股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010757849.9/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置