[发明专利]一种高效的信息流程化的处理控制系统

摘要

本发明涉及DNS日志海量信息的高效的信息流程化的处理控制系统，工作原理是客户端实现循环获取数据、解析处理数据、压缩数据、发送数据的功能。服务端实现循环接收数据、解压缩数据、存储数据的功能。与现有技术相比，本发明的优点在于：采用boost库分段过滤解析、索引数据处理的逻辑以及利用mysql数据库完成不同域名对应的标题信息下存储、查询与快速获取插入的能力，更重要的是与现有技术相比采用循环流程化的管理控制。

主权项

1.一种高效的信息流程化的处理控制系统，其特征在于：针对DNS日志信息解析、控制，包括信息传输模块、原信息获取模块、原信息解析处理模块、远程压缩与解压缩模块以及信息保存管理模块；/n信息传输模块采用面向连接可靠的基于字节流的传输层协议TCP进行信息的可靠传输，此模块分为客户端和服务端，实现客户端循环发送及服务端循环接收；/n原信息获取模块主要实现扫描目录文件的功能并且具有文件为空、目录为空的探查能力；/n原信息解析处理模块主要实现根据原信息获取模块获取的文件信息进行解析处理，主要采用boost库的正则进行分段过滤，对分段的信息进行索引处理时用到curl库联网获取信息中的标题、编码的转换采用enca/iconv库、信息存储与后期利用索引快速获取对应信息采用Mysql数据库；/n远程压缩与解压缩模块采用lzo高效压缩算法完成客户端压缩与服务端解压缩的功能；/n信息保存管理模块主要解决海量数据场景下解析处理效率低下引起DNS记录文件堆积所产生的问题，包括源文件、压缩文件、解析文件、解压缩文件的全程控制，包含客户端与服务端的删除控制，然后将文件目录信息插入mysql数据库进行管理。/n