[发明专利]一种面向分布式海量数据加载系统的可靠数据发送方法

摘要

本发明公开了一种面向分布式海量数据加载系统的可靠数据发送方法,消息结构包括消息头和消息体两部分构成；消息头包括：消息ID，消息类型和自定义消息。该消息可以通过http，https，TCP/IP或者其他类型的网络传输协议进行网络传输。接收终端可以根据消息头部的消息ID进行去重，验证等操作并且返回处理结果。按照本发明提供的方法，用户可以准确，有效的向分布式系统中发送数据。

主权项

一种面向分布式海量数据加载系统的可靠数据发送方法，其特征在于，设定消息组织结构、本地消息缓存方式、数据消息返回类型，具体为：设定在节点之间传输信息数据的消息组织结构，该消息结构包括消息头和消息体，消息头包括消息ID，消息类型和自定义消息，消息ID是消息的包好递增编号的唯一标识，消息类型是标明该消息的类别，是接收端接收消息后执行后续操作的判断依据，自定义消息是用户根据自身的业务需求自定义的消息属性；设定本地消息缓存方式：采用本地消息与消息节点之间一一对应的方式来完成本地消息的缓存；设定数据消息返回类型包括：成功OK、失败FALSE、忙碌BUSY、未知消息处理结果UNKNOW和自定义返回消息，其中：(1)OK：为成功，表示接收端成功接收并处理消息；(2)FALSE：为失败，表示接收端正确接收消息但是消息处理过程中出现错误；(3)BUSY：为忙碌，表示接收端正常接收消息但是接收端的消息处理能力已经达到极限，不能继续处理该消息即接收端忙碌未处理该消息；(4)UNKNOW：为未知，表示接收端成功接收消息，但是未获取消息处理结果；(5)自定义返回消息：为用户根据业务需求自定义的返回消息；方法包括以下几个部分：第一部分：面向分布式海量数据加载系统的客户端可靠数据消息发送处理；第二部分：面向分布式海量数据加载系统的服务端可靠数据消息接收处理；第三部分：面向分布式海量数据加载系统的可靠数据消息异常处理。