[发明专利]云端大数据存储管理方法、装置、电子设备及存储介质

权利要求书

1.一种云端大数据存储管理方法，其特征在于，所述方法包括：

接收用户的存储数据，根据用户对应的配置信息对所述存储数据进行归类处理，生成包含数据属性信息的数据对象，得到结构化数据，依照结构化数据的数据记录数维度，对结构化数据进行排序，并标记切片标签中的边缘切片标签，按照切片标签进行数据分割分类，得到初始数据切片，根据切片标签匹配所述存储数据，按照存储服务器中的节点数量和切片标签数量进行数据拼接，然后通过边缘切片标签的最大值和最小值作为一组队列进行切分，得到待存储数据切片；

获取预设存储服务器中的节点数据，根据所述节点数据计算所述存储服务器的存储负载，并根据所述存储负载确定所述存储服务器的负载状况；

在所述存储服务器的负载状况为负载均衡时，随机生成所述待存储数据切片的切片存储路线；

在所述存储服务器的负载状况为负载失衡时，构建存储目标函数并对所述存储服务器中数据节点进行编码，得到节点编号，将所述待存储数据切片作为初始种群进行维度初始化，得到切片维度值；

根据所述存储目标函数、所述节点编号以及所述切片维度值进行种群优化计算，得到切片存储路线；

从所述用户的存储规则中提取所述用户的安全等级，并对所述切片存储路线进行路线加密，得到加密路径；

当所述安全等级为低等级时，将所述加密路径添加至所述待存储数据切片的数据头中，得到加密切片；

当所述安全等级为中等级时，对所述待存储数据切片进行随机加密，得到第一加密切片，并将所述加密路径添加至所述第一加密切片的数据头中，得到加密切片；

当所述安全等级为高等级时，对所有的待存储数据切片进行加密，得到第二加密切片，并将所述加密路径添加至所述第二加密切片的数据头中，得到加密切片；

根据所述切片存储路线将所述加密切片部署在所述存储服务器的节点上。

2.如权利要求1所述的云端大数据存储管理方法，其特征在于，所述根据所述节点数据计算所述存储服务器的存储负载，包括：

根据所述节点数据利用下式计算所述存储服务器中每个数据节点的负载量；其中，为第k个数据节点的负载量；为所述数据节点中第i个数据切片；为第i个数据切片的数据量；N为所述数据节点中数据切片的总数；

利用下式对每个所述数据节点的负载量进行累加计算，得到所述存储服务器的总负载量；其中，L为所述存储服务器的总负载量；M为所述存储服务器中数据节点的总数，k为第k个数据节点；

获取所述存储服务器的运行数据，根据所述总负载量以及所述运行数据进行乘性计算，得到所述存储服务器的存储负载。

3.如权利要求2所述的云端大数据存储管理方法，其特征在于，所述根据所述总负载量以及所述运行数据进行乘性计算，包括：

利用下式对所述总负载量以及所述运行数据进行乘性计算：其中，Q为所述存储服务器的存储负载；a为所述总负载量在所述存储服务器的磁盘中的占比；u，c，d分别为所述运行数据中的上行速率、下行速率和最大速率。

4.如权利要求1所述的云端大数据存储管理方法，其特征在于，所述根据所述存储负载确定所述存储服务器的负载状况，包括：

利用下式根据所述存储负载计算基尼系数：其中，为基尼系数；为第k个数据节点；为第k个数据节点的数据量；为第k个数据节点中第i个数据切片；为第k个数据节点中第i个数据切片的数据量；M为所述存储服务器中数据节点的总数；Q为所述存储服务器的存储负载；

当所述基尼系数小于或等于预设阈值时，判定所述存储服务器的负载状况为负载均衡；

当所述基尼系数大于预设阈值时，判定所述存储服务器的负载状况为负载失衡。