[发明专利]一种自动化数据查询同步存储系统

摘要

本发明提供了一种自动化数据查询同步存储系统，包括：数据库；开源数据存储工具，用于快速对复杂多样化的待查询的数据进行存储；数据缓存工具，用于对查询过程中数据进行缓存；消息队列单元，用于对变更信息进行队列处理；获取解析信息单元，获取数据库变更、生成变更信息，分发解析数据并将数据输出给消息队列单元；及信息同步处理单元，用于将消息队列单元的消息数据同步处理后输入到所述开源数据存储工具；该自动化数据同步体系统能自动捕获数据库中更新数据并同步至开源数据存储工具，节约开发人员开发成本，无需进行开源数据存储工具同步、校验，系统各环节都实现可配置化，能够按配置的灵活的添加、删除新旧业务。

主权项

1.一种自动化数据查询同步存储系统，其特征在于：包括：数据库；开源数据存储工具，用于快速对复杂多样化的待查询的数据进行存储；数据缓存工具，用于对查询过程中数据进行缓存；消息队列单元，用于对变更信息进行队列处理；获取解析信息单元，获取数据库变更、生成变更信息，分发解析数据并将数据输出给消息队列单元；及信息同步处理单元，用于将消息队列单元的消息数据同步处理后输入到所述开源数据存储工具；数据封装单元；所述数据库、开源数据存储工具及数据缓存工具通过数据封装单元进行数据交换，所述数据库通过所述获取解析信息单元将数据传输给消息队列单元，所述消息队列单元通过所述信息同步处理单元将消息传输给所述开源数据存储工具；所述信息同步处理单元包括开源数据同步工具，所述开源数据同步工具自动获取数据库的日志信息，通过指定的数据结构完成对日志信息的解析；所述开源数据存储工具由索引和类型指定数据空间，所述数据库中表格结构和开源数据存储工具的类型一一映射从而完成数据同步，或者所述数据库中一个表格分别以不同的类型存在于所述开源数据存储工具，针对一份数据，同时同步数据至所述开源数据存储工具中指定的n个类型或类型中的子属性。