[发明专利]一种基于消息链的轻量级数据处理方法

摘要

本发明涉及分布式计算技术领域，特别是指一种基于消息链的轻量级数据处理框架。当消息被接收后进入消息处理链模块；经过链上每个处理器上行处理逻辑的处理后，缓存到上行消息队列中；上行消息队列管理线程取出消息放入消息线程池；消息线程池将消息解析成对象或者结构体；消息观察者根据类型决定是否接受消息，并对其进行特殊业务逻辑处理；另外，用户请求或响应经过消息解析模块转化成消息缓存到下行消息队列中；消息队列把下行消息保存在待发送队列中；按顺序出列进入消息处理链，经过链上每个处理器下行处理逻辑处理后发送至消息通道。本发明解决了采用消息中间件所存在的问题，可用于实现基于本数据处理框架的第三方软硬件的快速集成开发。

主权项

一种基于消息链的轻量级数据处理方法，其特征在于：包括步骤：上行消息从消息通道中被接收后进入消息处理链模块；消息依次经过链上每个处理器上行处理逻辑的处理后，缓存到上行消息队列中；上行消息队列管理线程从消息队列中取出消息放入消息线程池；消息线程池将消息解析成对象或者结构体；消息观察者根据消息对象或结构体的类型决定是否接受消息，并对其进行特殊业务逻辑处理；处理响应或者用户请求经过消息解析模块转化成消息缓存到下行消息队列中；消息队列把下行消息保存在待发送队列中；待发送队列中消息按顺序出列进入消息处理链，依次经过链上每个处理器下行处理逻辑处理后发送至消息通道；所述消息分为上行消息和下行消息；上行消息是指系统从消息通道上接收到并需要进行相应命令操作的请求，下行消息则是指命令操作处理完后的响应或是用户需要发送出去的请求；所述消息处理链是消息处理工具的链式集合，包括上行消息处理链和下行消息处理链；上行消息处理链包括的消息处理工具有消息解包、消息解压、消息解密及消息认证；下行消息处理链包括的消息处理工具则相应的有消息认证、消息加密、消息压缩和消息打包；所述的消息线程池是指各个消息处理线程的集合，具有将消息解析成各个对象或者结构体的功能；所述的消息观察者是指可以针对解析出来的消息对象进行各种不同处理的接口对象，包括日志观察者，审计观察者，虚拟机观察者，逻辑卷观察者；消息观察者采用观察者模式设计实现，同一个消息支持依次被多个观察者接收处理；观察者模式是编程设计中一种编程实现方法。