[发明专利]数据处理方法、系统、电子设备以及存储介质

权利要求书

1.一种数据处理方法，其特征在于，应用于包括消息系统、多个第一业务系统与多个第二业务系统的大数据系统，所述多个第一业务系统用于生成数据，所述多个第二业务系统用于通过所述消息系统消费所述多个第一业务系统生成的数据，所述方法包括：

所述消息系统获取所述第二业务系统的数据访问请求，所述数据访问请求包括所述第二业务系统的标识以及第一预设条件，所述第一预设条件是所述第二业务系统的用户设置的；

所述消息系统根据所述第二业务系统的标识，确定与所述第二业务系统关联的目标消息类型和第二预设条件，所述第二预设条件是所述第二业务系统关联的条件和/或所述目标消息类型关联的条件；

所述消息系统根据所述第二预设条件从目标节点中获取所述目标消息类型对应的数据中的第一数据，并根据所述第一预设条件从所述第一数据中获取目标数据，所述目标节点是存储所述目标消息类型的数据的多个节点中的主节点；

所述消息系统将所述目标数据发送给所述第二业务系统。

2.根据权利要求1所述的方法，其特征在于，所述消息系统根据所述第二预设条件从所述目标消息类型对应的数据中获取第一数据，并根据所述第一预设条件从所述第一数据中获取目标数据，包括：

根据所述第二业务系统的标识，确定所述第二业务系统上一次从所述目标消息类型中访问的数据；

根据所述第二预设条件以及所述第二业务系统上一次从所述目标消息类型中访问的数据，获取所述第一数据；

根据所述第一预设条件从所述第一数据中获取所述目标数据。

3.根据权利要求2所述的方法，其特征在于，所述消息系统根据所述第二业务系统的标识，确定与所述第二业务系统关联的目标消息类型和第二预设条件之前，还包括：

在所述数据访问请求包括所述目标消息类型的标识时，所述消息系统确定所述第二业务系统是首次从所述消息系统获取数据；

所述消息系统根据所述第二业务系统的标识与所述目标消息类型的标识建立所述第二业务系统与所述目标消息类型之间的关联关系。

4.根据权利要求3所述的方法，其特征在于，所述消息系统包括分布式存储系统，在所述消息系统获取所述第二业务系统的数据访问请求之前，所述方法还包括：

所述消息系统接收到所述第一业务系统发送的第三数据；

所述消息系统确定所述第三数据的消息类型；

所述消息系统将所述第三数据存储至多个目标节点中每个节点的目标存储队列中，所述目标存储队列是用于存储所述消息类型对应的数据的队列中，所述多个目标节点是所述分布式存储系统中的部分或全部存储节点。

5.根据权利要求4所述的方法，其特征在于，所述消息系统将所述第三数据存储至多个存储节点中所述消息类型对应的存储队列中，包括：

所述消息系统将所述第三数据进行序列化操作得到序列化后的第三数据，所述序列化操作用于将从所述第一业务系统获取得到的数据的数据类型从对象转化为字节序列；

所述消息系统将所述序列化后的第三数据存储到所述多个目标节点的所述目标存储队列中。

6.根据权利要求5所述的方法，其特征在于，所述消息系统将所述目标数据发送给所述第二业务系统，包括：

所述消息系统将所述目标数据进行反序列化操作，所述反序列化操作用于将序列化存储的数据的数据类型从字节序列转化为对象；

所述消息系统将反序列化后的目标数据发送给所述第二业务系统。