[发明专利]一种数据存储方法、系统、电子设备及存储介质

说明书

本发明提供一种数据存储方法、系统、电子设备及存储介质，该方法包括：基于车端预上传的本地数据生成第一json文件，将第一json文件上传至Snowball设备；将Snowball设备中数据发送至数据中心后，数据中心将Snowball设备中数据传输至存储桶中；通过调用预定Python工具包获取存储桶中数据，并生成存储桶数据对应的第二json文件；比对第一json文件和第二json文件，判断文件数据是否一致，并基于比对结果生成第三json文件，在第三json文件中标注数据比对是否正常，对比对异常数据进行重传。从而可以提高车辆数据传输、存储效率，并有效保障存储数据的一致性。

技术领域

本发明属于数据处理领域，尤其涉及一种数据存储方法、系统、电子设备及存储介质。

背景技术

一般车辆在行驶过程中，自动驾驶系统需要实时采集车辆的行驶数据进行存储、分析以及备份等。数据存储过程中，由于需要传输、存储的数据量较大，常规的硬盘存储难以满足传输速度要求，致使存储效率较低。

发明内容

有鉴于此，本发明实施例提供了一种数据存储方法、系统、电子设备及存储介质，用于解决现有硬盘存储效率低的问题。

在本发明实施例的第一方面，提供了一种数据存储方法，包括：

基于车端预上传的本地数据生成第一json文件，并将第一json文件上传至Snowball设备；

将Snowball设备中数据发送至数据中心后，数据中心将Snowball设备中数据传输至存储桶中；

通过调用预定Python工具包获取存储桶中数据，并生成存储桶数据对应的第二json文件；

比对第一json文件和第二json文件，判断文件数据是否一致，并基于比对结果生成第三json文件，在第三json文件中标注数据比对是否正常，对比对异常数据进行重传。

在本发明实施例的第二方面，提供了一种数据存储系统，包括：

上传模块，用于基于车端预上传的本地数据生成第一json文件，并将第一json文件上传至Snowball设备；

数据传输模块，用于将Snowball设备中数据发送至数据中心后，数据中心将Snowball设备中数据传输至存储桶中；

生成模块，用于通过调用预定Python工具包获取存储桶中数据，并生成存储桶数据对应的第二json文件；

比对重传模块，用于比对第一json文件和第二json文件，判断文件数据是否一致，并基于比对结果生成第三json文件，在第三json文件中标注数据比对是否正常，对比对异常数据进行重传。

在本发明实施例的第三方面，提供了一种装置，包括存储器、处理器以及存储在所述存储器中并可在所述处理器运行的计算机程序，所述处理器执行所述计算机程序时实现如本发明实施例第一方面所述方法的步骤。

在本发明实施例的第四方面，提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现本发明实施例第一方面提供的所述方法的步骤。

本发明实施例中，通过将本地车辆数据上传至云端存储，可以提高数据传输、存储速度，满足TB级数据存储需求，同时，对上传数据进行json文件比对，可以保障数据一致性，保障数据存储准确高效。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单介绍，显而易见地，下面描述的附图仅仅是本发明的一些实施例，对本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获取其他附图。

图1为本发明实施例提供的一种数据存储方法的流程示意图；