[发明专利]一种异构数据源数据查询方法及装置

说明书

技术领域

本发明涉及通信技术领域，尤其涉及一种异构数据源数据查询方法及装置。 

背景技术

目前，在各类业务运营维护过程中，经常需要对业务处理过程中产生的大量业务日志中的历史数据(业务处理机已经处理的数据)以及业务处理机正在处理的实时数据进行查询及分析，以有利于软件提供商排查、定位故障问题，从而进一步提高产品质量，以及有利于业务运营商不断提高业务的运维能力等。 

一般情况下，Web页面的数据包括两类数据，一类数据为业务处理机已经处理的数据(也称为历史数据)，将该类数据存储在商业数据库中；另一类数据为业务处理机正在处理的数据(也称为实时数据)，将该类数据存储在业务处理机的内存中；由于该两类数据的数据源本身存在差异(比如数据量多少、服务器忙闲、网络传输快慢等因素)并且每类数据都包含有多个数据源，需要采用两套数据采集机制分别从存储该两类数据的数据库中获取满足条件的数据；因此，现有技术不能实现统一查询异构数据源数据，一次查询，系统只能从商业数据库中的一个或多个数据库节点中查询数据，或者从业务处理机中一个或多个业务处理节点中获取数据。 

目前，查询不同数据源中的数据采用的查询方式不同，因此，查询多个异构源中的数据时，需要进行多次查询，从而使得在需要查询多个异构源中的数据时，查询复杂度较高，数据查询耗费的时间较长、效率较低。因此，在需要查询大量的异构源数据时，采用现有技术的查询方式，存在耗时长、效率低的问题。 

发明内容

本发明实施例提供一种异构数据源数据查询方法及装置，以解决现有技术中不能实现统一查询异构数据源数据而导致在需要查询大量异构数据源数据时，耗时长、效率低的问题。 

一种异构数据源数据查询装置，包括数据采集模块、数据处理模块、数据展示模块，其中： 

数据采集模块，用于接收数据查询请求，并根据该数据查询请求确定出该次查询的待查询数据源为第一数据源与第二数据源，所述第一数据源与所述第二数据源为异构数据源；启动第一组数据采集线程从所述第一数据源中获取数据，启动第二组数据采集线程从所述第二数据源中获取数据，所述第一组数据采集线程中的数据采集线程与所述第一数据源的数据节点一一对应，所述第二组数据采集线程中的数据采集线程与所述第二数据源的数据节点一一对应； 

数据处理模块，用于将所述第一组数据采集线程和所述第二组数据采集线程获取到数据转换成统一数据格式； 

数据展示模块，用于展示所述数据处理模块处理之后的数据。 

一种异构数据源数据查询方法，包括： 

接收数据查询请求，并根据该数据查询请求确定出该次查询的待查询数据源为第一数据源与第二数据源，所述第一数据源与所述第二数据源为异构数据源；启动第一组数据采集线程从所述第一数据源中获取数据，启动第二组数据采集线程从所述第二数据源中获取数据，所述第一组数据采集线程中的数据采集线程与所述第一数据源的数据节点一一对应，所述第二组数据采集线程中的数据采集线程与所述第二数据源的数据节点一一对应； 

将所述第一组数据采集线程和所述第二组数据采集线程获取到数据转换成统一数据格式，并展示经过格式转换后的数据。 

本发明实施例中，接收到数据查询请求后，根据查询请求确定出该次查询的待查询数据源为第一数据源与第二数据源时，启动第一组数据采集线程从所述第一数据源中获取数据，启动第二数据采集线程从所述第二数据源中获取数据；并将获取到的数据转换成统一数据格式，并展示经过数据格式转换后的数据。采用本发明技术方案，实现了通过一次查询即可从异构数据源中获取不同类型的数据，从而实现了统一查询异构数据源数据，克服现有技术中一次查询只能查询一个数据源中的数据，不能实现统一查询异构数据源数据而导致异构数据源数据查询耗时长、效率低的问题，因此，采用本发明技术方案简化了异构数据源数据查询的复杂度，提高了异构数据源数据查询效率。 

附图说明

图1为本发明实施例中异构数据源数据查询装置的结构示意图； 

图2为本发明实施例中数据采集模块采集异构数据源数据的示意图； 

图3为本发明实施例中基于图1所示装置对异构数据源进行数据查询的流程图； 

图4为本发明实施例中将本发明技术方案应用在查询短信的应用场景中的示意图。 

具体实施方式

下面结合说明书附图对本发明实施例进行详细的描述。