[发明专利]一种数据存储系统和上传、存储方法、装置、设备及介质有效
申请号: | 202010242220.0 | 申请日: | 2020-03-31 |
公开(公告)号: | CN111444160B | 公开(公告)日: | 2022-06-07 |
发明(设计)人: | 曾辉;孙清泉 | 申请(专利权)人: | 南京领行科技股份有限公司 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/178;G06F16/172;G06F21/60;H04L67/1097 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 丁睿 |
地址: | 211100 江苏省南京市江宁区苏源大*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 存储系统 上传 存储 方法 装置 设备 介质 | ||
1.一种数据存储系统,其特征在于,包括:业务模块、任务分发管理模块、以及多个分区服务器,其中,
所述业务模块,通过终端与用户交互,生成用户数据,并将生成的用户数据以数据包的形式发送至所述任务分发管理模块;
所述任务分发管理模块,用于将接收到的数据包分割为多个数据文件,并基于自身所在的位置,在所述多个分区服务器中确定用于接收数据包的第一分区服务器,将所述数据文件上传至所述第一分区服务器;在将任一数据文件上传至所述第一分区服务器的过程中,若所述任务分发管理模块的位置发生变化、且确定将数据文件上传至第二分区服务器的上传速度大于将数据文件上传至所述第一分区服务器的上传速度,则将该数据文件已上传至所述第一分区服务器的部分同步至所述第二分区服务器,并将该数据文件未上传的部分继续上传至所述第二分区服务器,删除所述第一分区服务器中该数据文件已上传的部分;
所述分区服务器,用于在确定所有数据文件均上传完成时,将接收到的数据文件组合成数据包,并对所述数据包进行结构化存储。
2.根据权利要求1所述的系统,其特征在于,所述任务分发管理模块基于自身所在位置选择分区服务器,将所述多个数据文件上传至分区服务器,具体用于:
基于自身所在的位置,在所述多个分区服务器中确定用于接收数据包的第一分区服务器,将所述数据文件上传至所述第一分区服务器;
在将任一数据文件上传至所述第一分区服务器的过程中,若所述任务分发管理模块的位置发生变化、确定将数据文件上传至第二分区服务器的上传速度大于将数据文件上传至所述第一分区服务器的上传速度、且该数据文件已上传部分大于预设比例阈值,则获取该数据文件上传所需的剩余上传时长;
若所述剩余上传时长小于预设时长阈值,则将该数据文件未上传的部分继续上传至所述第一分区服务器,若剩余上传时长大于或等于所述预设时长阈值,则将该数据文件重新上传至所述第二分区服务器,删除所述第一分区服务器中该数据文件已上传的部分。
3.根据权利要求1或2所述的系统,其特征在于,若所述数据文件上传至两个及两个以上的分区服务器,则所述分区服务器将接收到的数据文件组合成数据包,具体用于:
在确定所有数据文件均上传完成时,将所述两个及两个以上的分区服务器中的数据文件同步至一个目标分区服务器中,并在所述目标分区服务器中将接收到的数据文件组合成数据包。
4.根据权利要求1所述的系统,其特征在于,所述分区服务器,对所述数据包进行结构化存储,具体用于:
从所述数据包中提取用于描述数据包的描述数据,所述描述数据包括以下一种或多种:标题、内容、数据所有者;
基于与所述分区服务器通信连接的中心服务器提供的用于表征多个数据文件索引关系的描点信息,确定所述数据包本身的第一评价数据以及所述数据包与所述中心服务器中其它数据之间的第二评价数据;
将所述描述数据、所述第一评价数据、以及所述第二评价数据以结构化的形式存储到数据库中。
5.根据权利要求1所述的系统,其特征在于,所述任务分发管理模块将所述多个数据文件上传至分区服务器,具体用于:
以预设位数的密匙对所述多个数据文件加密处理,将加密处理后的数据文件上传至分区服务器,其中,所述密匙经多轮位置变换操作生成、且所述密匙周期性更新。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京领行科技股份有限公司,未经南京领行科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010242220.0/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置