[发明专利]一种数据存储方法、系统、电子设备及存储介质在审
申请号: | 202110862681.2 | 申请日: | 2021-07-29 |
公开(公告)号: | CN113742301A | 公开(公告)日: | 2021-12-03 |
发明(设计)人: | 李森林;周风明;朱敦华;刘强 | 申请(专利权)人: | 武汉光庭信息技术股份有限公司 |
主分类号: | G06F16/172 | 分类号: | G06F16/172;G06F16/17;G06F3/06 |
代理公司: | 武汉蓝宝石专利代理事务所(特殊普通合伙) 42242 | 代理人: | 朱才永 |
地址: | 430000 湖北省武汉市东湖开发区光谷软*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 存储 方法 系统 电子设备 介质 | ||
1.一种数据存储方法,其特征在于,包括:
基于车端预上传的本地数据生成第一json文件,并将第一json文件上传至Snowball设备;
将Snowball设备中数据发送至数据中心后,数据中心将Snowball设备中数据传输至存储桶中;
通过调用预定Python工具包获取存储桶中数据,并生成存储桶数据对应的第二json文件;
比对第一json文件和第二json文件,判断文件数据是否一致,并基于比对结果生成第三json文件,在第三json文件中标注数据比对是否正常,对比对异常数据进行重传。
2.根据权利要求1所述的方法,其特征在于,所述第一json文件中至少包含每条本地数据的文件名和数据大小。
3.根据权利要求1所述的方法,其特征在于,所述数据中心将Snowball设备中数据传输至存储桶中包括:
执行调用AWSSCLL的Snowball命令,通过云服务接口获取数据存储状态。
4.根据权利要求1所述的方法,其特征在于,所述通过调用预定Python工具包获取存储桶中数据具体为:
通过调用Python中的boto3工具包,获取云端存储桶中数据。
5.根据权利要求1所述的方法,其特征在于,所述在第三json文件中标注数据比对是否正常,对比对异常数据进行重传包括:
为第三json文件中比对异常数据添加第一标识,并为比对正常数据标注为第二标识;
获取第三json文件,当检测到异常数据对应的第一标识,则对异常数据进行手动重传。
6.一种数据存储系统,其特征在于,包括:
上传模块,用于基于车端预上传的本地数据生成第一json文件,并将第一json文件上传至Snowball设备;
数据传输模块,用于将Snowball设备中数据发送至数据中心后,数据中心将Snowball设备中数据传输至存储桶中;
生成模块,用于通过调用预定Python工具包获取存储桶中数据,并生成存储桶数据对应的第二json文件;
比对重传模块,用于比对第一json文件和第二json文件,判断文件数据是否一致,并基于比对结果生成第三json文件,在第三json文件中标注数据比对是否正常,对比对异常数据进行重传。
7.根据权利要求6所述的系统,其特征在于,所述第一json文件中至少包含每条本地数据的文件名和数据大小。
8.根据权利要求6所述的系统,其特征在于,所述数据中心将Snowball设备中数据存储至存储桶中包括:
执行调用AWSSCLL的Snowball命令,通过云服务接口获取数据存储状态。
9.一种终端设备,包括存储器、处理器以及存储在所述所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至5任一项所述数据存储方法的步骤。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被执行时实现如权利要求1至5任一项所述数据存储方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉光庭信息技术股份有限公司,未经武汉光庭信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110862681.2/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置