[发明专利]一种数据采集方法、装置及系统

说明书

本申请实施例公开了一种数据采集方法、装置及系统，在获取了数据被采集方通过第一数据传输协议传输的被采集的第一数据后，将第一数据通过数据采集方支持的第二数据传输协议发送给数据采集方，使得数据采集方和数据被采集方之间的数据传输无需限制于两个系统不同的数据传输协议，可快速对接，解决了现有的异构系统之间数据采集存在对接工作量大、周期长以及成本大的技术问题，无法满足各类系统之间的数据采集需求，不具备通用性。

技术领域

本申请涉及数据采集技术领域，尤其涉及一种数据采集方法、装置及系统。

背景技术

信息系统的运行离不开数据的支撑，数据采集是每个信息系统最重要的环节之一。

市场上现有的信息系统，其数据采集主要通过开放数据接口(http、ftp 等)或者通过MQ方式实现，数据采集须满足特定且单一的传输协议，且采集的数据须满足特定的报文结构，才可进行采集后的数据解析。其数据的被采集方须完全掌握数据对接的相关逻辑，且双方必须定义特定的数据传输规范，其对接工作量大、对接周期长，无法快速落地实施。

数据采集方和数据被采集方属于两个不同的信息系统时，基于不同的网络环境或不同的系统开发技术的情况下，为了满足应用需求，往往需要通过较长的时间相互了解或学习，然后再根据各自系统的技术实现环境或网络环境，定义数据对接方式，并在系统上通过程序代码方式进行数据采集的实现。现有的异构系统之间数据采集存在对接工作量大、周期长以及成本大的技术问题，无法满足各类系统之间的数据采集需求，不具备通用性。

发明内容

本申请实施例提供了一种数据采集方法、装置及系统，解决了现有的异构系统之间数据采集存在对接工作量大、周期长以及成本大的技术问题，无法满足各类系统之间的数据采集需求，不具备通用性。

有鉴于此，本申请第一方面提供了一种数据采集方法，所述方法包括：

获取向数据被采集方采集的第一数据，所述第一数据由所述数据被采集方通过第一数据传输协议传输；

确定所述第一数据的数据采集方支持的第二数据传输协议；

通过所述第二数据传输协议向所述数据采集方发送所述第一数据。

可选地，所述获取向数据被采集方采集的第一数据之前还包括：

通过预设配置文件与数据被采集方以及数据采集方的数据采集接口对接。

可选地，所述获取向数据被采集方采集的第一数据之后还包括：

对所述第一数据进行数据校验。

可选地，所述获取向数据被采集方采集的第一数据之后还包括：

确定所述第一数据的数据采集方的数据格式；

所述第一数据由所述数据被采集方的数据格式转换为所述数据采集方的数据格式。

可选地，所述获取向数据被采集方采集的第一数据之前还包括：

根据数据采集方以及数据被采集方的网络环境确定第一数据的数据传输方式。

本申请第二方面提供一种数据采集装置，所述装置包括：

获取单元，用于获取向数据被采集方采集的第一数据，所述第一数据由所述数据被采集方通过第一数据传输协议传输；

第一确定单元，用于确定所述第一数据的数据采集方支持的第二数据传输协议；

发送单元，用于通过所述第二数据传输协议向所述数据采集方发送所述第一数据。

可选地，还包括:

对接单元，用于通过预设配置文件与数据被采集方以及数据采集方的数据采集接口对接。