[发明专利]用于数据传输的方法、电子设备和存储介质

说明书

本公开的实施例涉及用于数据传输的方法、电子设备和计算机存储介质，涉及信息处理领域。根据该方法，如果确定参考缓冲区不为空，则基于参考缓冲区中的参考数据集合，对待发送的目标数据进行压缩，以得到压缩结果集合；确定是否从压缩结果集合中找到第一压缩结果，第一压缩结果的长度在压缩结果集合中最短并且小于最大允许压缩率与目标数据的长度的第一乘积；如果确定找到第一压缩结果，则发送步骤：向服务器发送第一压缩结果、与第一压缩结果相关联的第一参考数据标识以及与目标数据相关联的校验数据。由此，能够利用历史参考数据与待发送的目标数据的相似性，最大限度地减少目标数据需要传输的信息量，提高压缩率。

技术领域

本公开的实施例总体涉及信息处理领域，具体涉及用于数据发送的方法、电子设备和计算机存储介质以及用于数据接收的方法、电子设备和计算机存储介质。

背景技术

随着物联网以及智能硬件行业的兴起，越来越多的传感器和智能设备接入到物联网。这类物联网设备存在数据实时性要求较高，每包实时数据的长度一般在几十字节到1千多字节之间。传统的压缩算法(如zip、protobuff、huffman等)是针对长文件、长数据的，对于这类实时数据的压缩效果很差，基本上很难做到70％以上的压缩率。

有3种类型的常见物联网设备对于压缩率是非常敏感的。第1种是使用流量卡的物联网设备，这类设备的压缩率与流量的使用成本成正比，压缩率越高，流量的使用成本越低。第2种是使用电池供电的低功耗设备，每发送多1bit数据，就足以让MCU运行上千个指令了。第3种是NB、LoRa等窄带无线通讯技术的物联网设备，压缩率越高，设备对于频带的占用时间越短。因此，压缩率提升对于系统容量的提升和功耗的降低有着重要的意义。

发明内容

提供了一种用于数据发送的方法、电子设备以及计算机存储介质以及用于数据接收的方法、电子设备以及计算机存储介质，能够利用历史参考数据与待发送的目标数据的相似性，最大限度地减少目标数据需要传输的信息量，提高压缩率。

根据本公开的第一方面，提供了一种用于数据发送的方法。该方法包括：如果确定参考缓冲区不为空，则基于参考缓冲区中的参考数据集合，对待发送的目标数据进行压缩，以得到压缩结果集合；确定是否从压缩结果集合中找到第一压缩结果，第一压缩结果的长度在压缩结果集合中最短并且小于最大允许压缩率与目标数据的长度的第一乘积；如果确定找到第一压缩结果，则发送步骤：向服务器发送第一压缩结果、与第一压缩结果相关联的第一参考数据标识以及与目标数据相关联的校验数据；以及如果确定未找到第一压缩结果或者确定参考缓冲区为空，则将目标数据作为参考数据向服务器进行发送。

在一些实施例中，其中对所述目标数据进行压缩包括重复执行以下步骤直至所述参考数据集合处理完毕：获取步骤：从所述参考数据集合获取未处理的参考数据；将所述目标数据与所述参考数据每预定长度进行相减，以得到差值数据；在所述差值数据中确定彼此不同的、所述预定长度的多个非零数据片段以及所述多个非零数据片段的出现次数；基于所述出现次数，生成所述多个非零数据片段的排序结果，以作为压缩结果中的编码信息；基于所述排序结果，生成哈夫曼二叉树；将所述差值数据中的、所述预定长度的零数据片段编码为1比特预定值；以及基于所述哈夫曼二叉树，对所述差值数据中的、所述预定长度的非零数据片段进行编码，以得到所述压缩结果中的压缩数据。

在一些实施例中，其中生成所述排序结果包括：确定出现次数为1的非零数据片段的个数，作为第一转义码的出现次数；以及将所述第一转义码与所述多个非零数据片段中的出现次数大于1的非零数据片段按照出现次数进行排序，以得到所述排序结果；以及其中对所述差值数据中的、所述预定长度的非零数据片段进行编码包括：如果确定所述非零数据片段的出现次数为1，则将所述非零数据片段编码为包括所述哈夫曼二叉树中与所述第一转义码相对应的叶节点的编码数据和所述非零数据片段的序列；以及如果确定所述非零数据片段的出现次数大于1，则基于所述哈夫曼二叉树中与所述非零数据片段相对应的叶节点的编码数据，对所述非零数据片段进行编码。