[发明专利]一种数据处理方法、装置、电子设备和存储介质

权利要求书

1.一种数据处理方法，其特征在于，该方法包括：

获取多条报文数据以及各条所述报文数据的标识信息，所述报文数据的格式为层级数据格式HDF5，所述标识信息用于标识对应的报文数据的发送方和发送时间；

基于各条所述报文数据的标识信息，将各条所述报文数据划分为多个报文集合，每个报文集合中包含的报文数据的发送方相同，且发送时间属于同一时间区间；

基于预设映射规则，分别对所述多个报文集合中的报文数据进行映射，获得各个报文集合各自的报文记录，并将各个所述报文记录存储在云原生多模数据库中。

2.如权利要求1所述的方法，其特征在于，所述基于预设映射规则，分别对所述多个报文集合中的报文数据进行压缩，获得各个报文集合各自的报文记录，包括：

针对任意一个报文集合，基于所述任意一个报文集合中的各条报文数据的标识信息的相同字段，对所述各条报文进行合并得到合并报文；

基于预设映射规则对所述合并报文进行映射，获得所述报文集合对应的报文记录。

3.如权利要求1所述的方法，其特征在于，在所述基于各条报文数据各自的标识信息，将所述各条报文数据划分为多个报文集合之前，还包括；

分别对多条所述报文数据进行解析，获得各条标准格式的报文数据，所述标准格式为符合超文本传输协议http的压缩格式。

4.如权利要求2所述的方法，其特征在于，所述基于预设映射规则对所述合并报文进行映射，获得所述报文集合对应的报文记录包括：

基于预设映射规则，对所述合并报文包含的字节进行映射，获得所述报文集合对应的二进制格式的所述报文记录。

5.如权利要求1所述的方法，其特征在于，所述基于各条所述报文数据的标识信息，将各条所述报文数据划分为多个报文集合，包括：

基于各条所述报文数据的标识信息，确定各条所述报文数据的发送方，并基于各条所述报文数据的发送方，将各条所述报文数据划分为多个中间集合，同一中间集合中的报文数据的发送方相同；

针对任意一个中间集合，基于所述任意一个中间集合中包含的各条报文数据的标识信息，确定各条所述报文数据的发送时间，并基于各条所述报文数据的发送时间，将各条所述报文数据划分为多个报文集合，同一报文集合中的报文数据的发送时间属于同一预设时间区间。

6.如权利要求1所述的方法，其特征在于，所述报文数据中包含用于表征所述报文数据的发送方当前的运行状态的信息。

7.一种数据处理装置，其特征在于，包括：

获取单元，用于获取多条报文数据以及各条所述报文数据的标识信息，所述报文数据的格式为层级数据格式HDF5，所述标识信息用于标识对应的报文数据的发送方和发送时间；

划分单元，用于基于各条所述报文数据的标识信息，将各条所述报文数据划分为多个报文集合，每个报文集合中包含的报文数据的发送方相同，且发送时间属于同一时间区间；

映射单元，用于基于预设映射规则，分别对所述多个报文集合中的报文数据进行映射，获得各个报文集合各自的报文记录，并将各个所述报文记录存储在云原生多模数据库中。

8.一种电子设备，其特征在于，其包括处理器和存储器，其中，所述存储器存储有计算机程序，当所述计算机程序被所述处理器执行时，使得所述处理器执行权利要求1～6中任一所述方法的步骤。

9.一种计算机可读存储介质，其特征在于，其包括计算机程序，当所述计算机程序在电子设备上运行时，所述计算机程序用于使所述电子设备执行权利要求1～6中任一所述方法的步骤。

10.一种计算机程序产品，其特征在于，包括计算机程序，所述计算机程序存储在计算机可读存储介质中；当电子设备的处理器从所述计算机可读存储介质读取所述计算机程序时，所述处理器执行所述计算机程序，使得所述电子设备执行权利要求1～6中任一所述方法的步骤。