[发明专利]基于大数据平台的接口预警方法和系统有效
申请号: | 201910863846.0 | 申请日: | 2019-09-12 |
公开(公告)号: | CN110569178B | 公开(公告)日: | 2022-12-27 |
发明(设计)人: | 周道华;杨陈;曾俊;洪江;彭容;黄维;李武鸿;刘瑞东;张明娟;许江泽;吴婷婷;付志华;刘杰;詹飞;程武彬;杨眉 | 申请(专利权)人: | 成都中科大旗软件股份有限公司 |
主分类号: | G06F11/32 | 分类号: | G06F11/32;G06F11/30 |
代理公司: | 成都华风专利事务所(普通合伙) 51223 | 代理人: | 张巨箭 |
地址: | 610000 四川省成都市中国(四川)自由贸易试*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 数据 平台 接口 预警 方法 系统 | ||
1.基于大数据平台的接口预警方法,其特征在于:包括如下步骤:
服务端检测到业务端接入预定的接口时,建立与业务端的连接,并创建服务线程,以获取并解析来自业务端的请求;
所述服务端的服务线程在解析到来自业务端的请求为源数据调取请求时,建立业务端与源数据接口的连接,并创建第一监听线程;
所述第一监听线程对源数据调取过程进行监听,判断源数据接口是否能访问成功并成功返回请求数据,同时判断源数据接口接收到的返回的数据是否为有效数据;如果有任意一项不满足,则生成预警信息并发送;
在判断源数据接口能访问成功后,创建对应于所述源数据接口的第二监听线程;
所述第二监听线程轮询式监听业务端的数据库日志记录,验证当前数据是否有效存在;如果不满足,则生成预警信息并发送。
2.根据权利要求1所述的基于大数据平台的接口预警方法,其特征在于:所述的判断源数据接口是否能访问成功,具体包括:
通过http协议访问请求源数据接口,验证接口是否正常能调用。
3.根据权利要求1所述的基于大数据平台的接口预警方法,其特征在于:判断成功返回请求数据,具体包括:
采用http协议判断接口请求状态,并根据返回的协议状态码进行验证。
4.根据权利要求1所述的基于大数据平台的接口预警方法,其特征在于:所述的判断源数据接口接收到的返回的数据是否为有效数据,具体包括:
验证数据结构:接口请求成功后返回的数据结构是否满足业务需求;
验证每个数据项格式是否正确,包括字符、数字、汉字和长度在内的字符类型验证;
验证所有返回的数据项是否都是合法有效数据。
5.根据权利要求1所述的基于大数据平台的接口预警方法,其特征在于:所述验证当前数据是否有效存在,具体包括:
在业务端的数据库中以轮询式搜索日志记录的数据表中是否有新数据产生,具体采用任务调度器轮询式使用Tsql脚本语句搜索。
6.根据权利要求1所述的基于大数据平台的接口预警方法,其特征在于:所述源数据接口由服务端的任务调度模块进行调度分配,所述预警信息发送至任务调度模块;所述预警信息包括数据错误情况和源数据接口ID;
当在一段时间多次接收到同一源数据接口ID的预警信息时,将对应源数据接口挂起,自动断开业务端与服务端的连接,并分配新的源数据接口与业务端连接;之后,将挂起的源数据接口释放。
7.根据权利要求6所述的基于大数据平台的接口预警方法,其特征在于:所述数据错误情况包括数据错误类型和对应源数据的数据包名称;将所述数据包名称发送至业务端,以使所述业务端将未发送完成的数据包进行发送;
服务端对重分配接口的业务端的所有数据进行组合处理;其中,对于具有相同数据包名称的数据,自动丢弃数据大小不是最大的对应数据包名称的数据。
8.根据权利要求6所述的基于大数据平台的接口预警方法,其特征在于:所述预警信息还发送至显示装置,以使管理员获取各源数据接口的故障情况并进行相应处理。
9.根据权利要求8所述的基于大数据平台的接口预警方法,其特征在于:经挂起并释放后的源数据接口相较于未经挂起处理的源数据接口,在预设时间内具有低优先级;在预设时间后或者经管理员处理后恢复优先级。
10.基于大数据平台的接口预警系统,其特征在于:包括服务端和业务端,其中:
所述服务端,用于检测到业务端接入预定的接口时,建立与业务端的连接,并创建服务线程,以获取并解析来自业务端的请求;
所述服务端,用于在所述服务线程在解析到来自业务端的请求为源数据调取请求时,建立业务端与源数据接口的连接,并创建第一监听线程;
所述第一监听线程,用于对源数据调取过程进行监听,判断源数据接口是否能访问成功并成功返回请求数据,同时判断源数据接口接收到的返回的数据是否为有效数据;如果有任意一项不满足,则生成预警信息并发送;
所述服务端或业务端,用于在判断源数据接口能访问成功后,创建对应于所述源数据接口的第二监听线程;
所述第二监听线程,用于轮询式监听业务端的数据库日志记录,验证当前数据是否有效存在;如果不满足,则生成预警信息并发送。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于成都中科大旗软件股份有限公司,未经成都中科大旗软件股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910863846.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种日志覆盖机制的测试方法及装置
- 下一篇:数据采集系统及数据采集方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置