[发明专利]大数据自由查询方法及装置

说明书

本发明提供了一种大数据自由查询方法及装置，该方法包括：接收客户端发送的自由查询请求；根据已存储的用户Id与会话Id的关系确定是否存在与用户Id相对应的会话Id，若不存在，则为所述用户Id配置会话Id，根据待访问数据库服务器标识，与待访问数据库服务器建立jdbc连接，若存在，则将该对应的会话Id已存在的前查询任务删除，并使用该对应的会话Id连接待访问数据库服务器；将所述自由查询请求发送至相应的数据库服务器；接收相应的数据库服务器返回的查询结果；并将查询结果返回至客户端。上述方案通过对连接的使用优化来提高查询效率，满足大数量、实时查询场景下的查询效率与一致性问题，支持匹配各类数据库服务器。

技术领域

本发明涉及数据查询技术领域，特别是指一种大数据自由查询的方法及装置。

背景技术

当前BI系统从数据库读取数据时，从建立连接到查询结果，每一次的查询都是一个新查询且会快速消耗系统资源。而BI系统短时间内的查询会急速增长，导致系统运行一段时间后会出现连接无法建立等各种情况。

BI系统读取数据时，由于资源限制，从数据库读取数据每次只会读取几行到几十行，同时会使用分页功能查询后续数据。使用此种方法时的每一次翻页都是触发一次新的查询，当查询复杂且数据量大时，如果单次查询的时间过长会导致系统响应时间过长。此外触发了多次查询，如果在两次查询中原表数据有变动，则查询结果不能保证数据与前次查询数据的一致性。

针对上述问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种大数据自由查询的方法及装置，该方法解决了现有技术中针对每一次的查询都是一个新查询且会快速消耗系统资源的技术问题。

本发明实施例提供了一种大数据自由查询的方法，该方法包括：

接收客户端发送的自由查询请求，所述自由查询请求中包括用户Id、待访问数据库服务器标识；

根据已存储的用户Id与会话Id的关系确定是否存在与用户Id相对应的会话Id，若不存在，则为所述用户Id配置会话Id，根据待访问数据库服务器标识，与待访问数据库服务器建立jdbc连接，若存在，则将该对应的会话Id已存在的前查询任务删除，并使用该对应的会话Id连接待访问数据库服务器；

将所述自由查询请求发送至相应的数据库服务器；

接收相应的数据库服务器返回的查询结果；

并将查询结果返回至客户端；

所述自由查询请求中还包括会话Id和查询结果Id；

还包括：

根据会话Id和查询结果Id，至已执行查询且并未关闭的查询任务中查找相应会话Id和查询结果Id，若存在，则将查询结果Id对应的查询结果返回，若不存在，则使用该会话Id与数据库服务器建立jdbc连接，向数据库服务器提交查询指令；

本发明实施例还提供了一种大数据自由查询的装置，该装置包括：

自由查询请求接收模块，用于接收客户端发送的自由查询请求，所述自由查询请求中包括用户Id、待访问数据库服务器标识；

查询分析执行模块，用于根据已存储的用户Id与会话Id的关系确定是否存在与用户Id相对应的会话Id，若不存在，则为所述用户Id配置会话Id，根据待访问数据库服务器标识，与待访问数据库服务器建立jdbc连接，若存在，则将该对应的会话Id已存在的前查询任务删除，并使用该对应的会话Id连接待访问数据库服务器；

提交至数据库模块，用于将所述自由查询请求发送至相应的数据库服务器；

结果接收模块，用于接收相应的数据库服务器返回的查询结果；

结果返回模块，用于获得并返回查询结果。