[发明专利]数据处理方法及装置

说明书

本申请提供数据处理方法及装置，其中所述数据处理方法包括：获取待存储二进制数据并写入二进制文件；确定所述待存储二进制数据的数据长度，以及所述待存储二进制数据对应的相对偏移量；其中，所述相对偏移量为所述待存储二进制数据在二进制文件中的目标地址与所述待存储二进制数据所在字段的段地址之间的距离；基于所述数据长度和所述相对偏移量更新所述二进制文件对应的数据结构对象。以这种形式存储的数据，能够在被调用时直接加载到内存中，无需反序列化操作即可得到目标数据，使得数据加载更加高效，尤其是需要实时计算数据的情境下，无需反序列化的操作使系统运行效率大大增加，解决了系统运行缓慢、卡顿的问题。

技术领域

本申请涉及数据处理技术领域，特别涉及一种数据处理方法，一种数据读取方法。本申请同时涉及一种数据处理装置、一种数据读取装置、一种计算设备，以及一种计算机可读存储介质。

背景技术

随着互联网技术的发展，计算设备应用到的数据信息越来越多，这就导致了数据的处理以及读取变得更加有难度，计算设备在硬件迎来革命性迭代进步之前，处理越来越大量的数据已经愈发力不从心。现有技术中，数据在存储时，将数据写入到容器中，基于容器需要先写一个容器标记，之后再加上容器大小，最后将数据依次写入容器之中；反之读取数据内容时也需要依次读取数据，以保证能够正确构造目标数据对象。然而，对容器内的大量数据进行实时处理时，读取的数据需要进行反序列化后才能被计算系统识别和应用，这会使得系统实时计算过程的效率低下，那么如何在计算设备使用原有硬件的基础上，加快计算效率就成了亟待解决的问题。

发明内容

有鉴于此，本申请实施例提供了一种数据处理方法，一种数据读取方法，以解决现有技术中存在的技术缺陷。本申请实施例同时提供了一种数据处理装置，一种数据读取装置，一种计算设备，以及一种计算机可读存储介质。

根据本申请实施例的第一方面，提供了一种数据处理方法，包括：

获取待存储二进制数据并写入二进制文件；

确定所述待存储二进制数据的数据长度，以及所述待存储二进制数据对应的相对偏移量；其中，所述相对偏移量为所述待存储二进制数据在二进制文件中的目标地址与所述待存储二进制数据所在字段的段地址之间的距离；

基于所述数据长度和所述相对偏移量更新所述二进制文件对应的数据结构对象。

可选地，所述获取待存储二进制数据并写入二进制文件包括：

获取待存储数据，并检测所述待存储数据的类型；

在所述待存储数据是二进制数据类型的情况下，将所述待存储数据作为所述待存储二进制数据，并写入所述二进制文件；

在所述待存储数据不是二进制数据类型的情况下，根据所述待存储数据的类型与数据结构确定数据转换方法，基于所述数据转换方法将所述待存储数据转换为所述待存储二进制数据，并写入所述二进制文件。

可选地，所述确定所述待存储二进制数据的数据长度包括：

检测所述待存储二进制数据的字节数量；

基于所述字节数量确定所述待存储二进制数据的数据长度。

可选地，所述确定所述待存储二进制数据对应的相对偏移量包括：

确定所述待存储二进制数据在所述二进制文件中对应的位置字段，将所述位置字段的地址信息作为段地址；

基于所述待存储二进制数据的数据内容在所述二进制文件中存储的字段的地址信息，确定所述二进制数据的目标地址；

计算所述段地址与所述目标地址之间的距离，根据计算结果确定所述相对偏移量。

可选地，所述数据结构对象中包括文件布局信息与字段标识；