[发明专利]基于大数据平台的接口预警方法和系统

说明书

本发明公开了基于大数据平台的接口预警方法和系统，方法包括如下步骤：服务端的服务线程在解析到来自业务端的请求为源数据调取请求时，建立业务端与源数据接口的连接，并创建监听线程；监听线程对源数据调取过程进行监听，判断源数据接口是否能访问成功并成功返回请求数据，同时判断源数据接口接收到的返回的数据是否为有效数据；如果有任意一项不满足，则生成预警信息并发送；在判断源数据接口能访问成功后，创建对应于源数据接口的监听线程；监听线程轮训式监听业务端的数据库日志记录，验证当前数据是否有效存在；如果不满足，则生成预警信息并发送。本发明提供的接口预警，从服务端到业务端两层关卡，双向保障数据接口预警效果，无遗漏。

技术领域

本发明涉及大数据领域，尤其涉及提供基于大数据平台的接口预警方法和系统。

背景技术

大数据(big data)是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

大数据技术的战略意义不在于掌握庞大的数据信息，而在于对这些含有意义的数据进行专业化处理。换而言之，如果把大数据比作一种产业，那么这种产业实现盈利的关键，在于提高对数据的“加工能力”，通过“加工”实现数据的“增值”。从技术上看，大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理，必须采用分布式架构。它的特色在于对海量数据进行分布式数据挖掘。

而在日常各类数据对接过程中，会采用数据接口进行服务端与业务端的交互，而当数据接口发生故障时，如若不进行相应预警，则会对整个大数据处理过程产生影响。因此，提供基于大数据平台的接口预警方法和系统是本领域亟待解决的问题。

公开于本发明背景技术部分的信息仅仅旨在加深对本公开的一般背景技术的理解，而不应当被视为承认或以任何形式暗示该信息构成已为本领域技术人员所公知的现有技术。

发明内容

本发明的目的在于克服现有技术的不足，提供一种提供基于大数据平台的接口预警方法和系统。

本发明的目的是通过以下技术方案来实现的：

本发明的第一方面，提供基于大数据平台的接口预警方法，包括如下步骤：

服务端检测到业务端接入预定的接口时，建立与业务端的连接，并创建服务线程，以获取并解析来自业务端的请求；

所述服务端的服务线程在解析到来自业务端的请求为源数据调取请求时，建立业务端与源数据接口的连接，并创建第一监听线程；

所述第一监听线程对源数据调取过程进行监听，判断源数据接口是否能访问成功并成功返回请求数据，同时判断源数据接口接收到的返回的数据是否为有效数据；如果有任意一项不满足，则生成预警信息并发送；

在判断源数据接口能访问成功后，创建对应于所述源数据接口的第二监听线程；

所述第二监听线程轮训式监听业务端的数据库日志记录，验证当前数据是否有效存在；如果不满足，则生成预警信息并发送。

进一步地，所述的判断源数据接口是否能访问成功，具体包括：

通过http协议访问请求源数据接口，验证接口是否正常能调用。

进一步地，判断成功返回请求数据，具体包括：

采用http协议判断接口请求状态，并根据返回的协议状态码进行验证。

进一步地，所述的判断源数据接口接收到的返回的数据是否为有效数据，具体包括：

验证数据结构：接口请求成功后返回的数据结构是否满足业务需求；