[发明专利]基于多数据源的统一数据服务开放方法及系统

说明书

本发明公开了一种基于多数据源的统一数据服务开放方法及系统，其中，系统包括：动态数据服务子系统，用于将Web服务配置页面传来的SQL语句进行解析，生成相关数据源查询任务、用户指定服务的输入数据、输出数据模型以及对应的Restful服务，并且当发生服务请求时，发送服务对应的多个数据源查询任务，以从大数据系统中获取目标数据，并将最终结果返回给调用者；多数据源查询引擎子系统，用于将动态数据服务子系统传来的多个数据源查询任务，封装成具体查询任务，通过数据源连接中间件向不同平台、数据源请求目标数据，实现和大数据系统底层组件的交互，且将最终结果进行统一封装返回并缓存。该系统具有高灵活性和高效性的优点，简单易实现。

技术领域

本发明涉及信息技术及数据业务技术领域，特别涉及一种基于多数据源的统一数据服务开放方法及系统。

背景技术

BDaaS(Big Data as a Service，大数据服务)是一种数据使用模式，是在对大数据统一建模的基础上，将各类数据操作进行封装，对外提供无处不在的、标准化的、随需的检索、分析或可视化服务交互。大数据服务不仅是一种新技术，也是一种新的数据资源使用模式和一种新的服务经济模式。但是目前大数据服务还面临一下难题：

1、面向差异化的服务场景和用户需求，如何设计一种能够屏蔽数据资源复杂性，实现检索、分析及可视化服务提供规范化的大数据服务架构，是大数据服务首先需要解决的问题；

2、为了适应多变的服务场景和个性化的用户需求，如何提高大数据服务能力，也是大数据服务面临的一大挑战。

发明内容

本发明旨在至少在一定程度上解决相关技术中的技术问题之一。

为此，本发明的一个目的在于提出一种基于多数据源的统一数据服务开放系统，该系统具有高灵活性和高效性的优点，可以适应多变的服务场景和个性化的用户需求，简单易实现。

本发明的另一个目的在于提出一种基于多数据源的统一数据服务开放方法。

为达到上述目的，本发明一方面实施例提出了一种基于多数据源的统一数据服务开放系统，包括：动态数据服务子系统，用于将Web服务配置页面传来的SQL语句进行解析，生成相关数据源查询任务、用户指定服务的输入数据、输出数据模型以及对应的Restful服务，并且当发生服务请求时，发送服务对应的多个数据源查询任务，以从大数据系统中获取目标数据，并将最终结果返回给调用者；多数据源查询引擎子系统，用于将所述动态数据服务子系统传来的多个数据源查询任务，封装成具体查询任务，通过数据源连接中间件向不同平台、数据源请求所述目标数据，实现和大数据系统底层组件的交互，且将所述最终结果进行统一封装返回并缓存。

本发明实施例的基于多数据源的统一数据服务开放系统，具有高灵活性和高效性的优点，使用户方便集成多种数据源，对多数据源的元数据进行统一管理，提供动态数据服务引擎层，将上层需要的具体数据的查询任务封装成一个功能，转换成Service，以RestfulAPI的方式；将底层的数据(多数据源)，以JSON格式，有组织、有标准，可管理、易集成，易复用地对外提供数据服务，以适应多变的服务场景和个性化的用户需求。

另外，根据本发明上述实施例的基于多数据源的统一数据服务开放系统还可以具有以下附加的技术特征：

进一步地，在本发明的一个实施例中，所述动态数据服务子系统具体用于：接收SQL语句，并对所述SQL语句进行解析，得到抽象语法树；根据解析结果与多数据源的元数据进行比较，判断所述SQL语句是否合法；若SQL语句不合法，则给出相关提示，并退出；若SQL语句合法，则解析服务的输入输出模型；提取各个数据源的信息；根据所述输入输出模型及相关配置信息生成对应的服务。

进一步地，在本发明的一个实施例中，根据每条SQL语句对应的Web服务，在提交所述SQL语句前，将所述SQL语句与对应唯一标识进行绑定，并将所述唯一标识作为访问路径。