[发明专利]数据监控方法、设备及计算机存储介质有效
申请号: | 201811226988.8 | 申请日: | 2018-10-22 |
公开(公告)号: | CN109359277B | 公开(公告)日: | 2023-04-28 |
发明(设计)人: | 钱立化;周明莉 | 申请(专利权)人: | 众安在线财产保险股份有限公司 |
主分类号: | G06F40/12 | 分类号: | G06F40/12;G06Q40/08 |
代理公司: | 北京永新同创知识产权代理有限公司 11376 | 代理人: | 杨胜军 |
地址: | 200002 上海市黄*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 监控 方法 设备 计算机 存储 介质 | ||
本公开内容公开了数据监控方法、设备及计算机存储介质。数据监控方法包括:在多个第一类规则集合中每一个第一类规则集合中判断是否存在至少一个规则共性;在存在至少一个规则共性的情况下,将第一类规则集合划分出相应的第二类规则集合;利用规则共性生成与第二类规则集合相对应的验证规则模型;基于第二类规则集合与需要符合第二类规则集合的字段、标准数据表的关联性,识别出要符合第二类规则集合的标准数据表中的字段;将字段结合到验证规则模型中以生成与字段相对应的验证脚本;在字段所属的标准数据表中通过验证脚本来验证与字段相对应的所有数据单元;以及当存在不满足验证脚本的数据单元时,生成与数据单元相关的报错信息。
技术领域
本公开内容属于数据处理技术领域,尤其涉及一种数据监控方法、一种数据监控设备以及一种相应的计算机可读存储介质。
背景技术
近年来,随着计算机技术的不断的发展,各个领域中的数据都呈现出爆炸性增长的趋势,因此,对于大量、复杂数据的计算处理能力的要求也越来越高。例如,在保险金融领域中,为了确保每份保险中的所有数据的合法性、合规性,需要繁多的数据规则以及大量的标准数据表完成对保险中的所有数据进行不同方式的验证以及将该保险中的所有数据根据不同的标准需求填入不同的标准数据表格中,以便于相关工作部门对保险数据进行核实。在上述情形中,如果仅手工编写监控程序验证每份保险中的数据,不仅需要消耗大量的人力,而且也需要花费大量的时间,容易导致数据监控的规则遗漏;另一方面,由于保险和互联网的结合,保险数据量增长速度非常快,保险数据也变得复杂多样,因此对保险数据的监控提出了更高的要求。
发明内容
随着各个领域中的数据的增长速度不断加快,通过需要根据大量数据规则、标准数据表对数据进行处理、监控以确保数据的准确性,目前的技术一般是开发人员编写针对每张标准数据表的监控程序来监控该标准数据表中的数据;由此,不仅消耗了大量的人力、物力,花费了大量的时间,而且当标准数据表发生变化时,需要重新编写监控程序完成监控目的。
针对上述问题,本公开内容的第一方面提出了一种数据监控方法,所述方法包括:
在多个第一类规则集合中的每一个第一类规则集合中判断是否存在至少一个规则共性,其中,所述多个第一类规则集合是将所有数据规则进行划分而形成的并且每一个所述第一类规则集合包括一条或多条数据规则;
在存在所述至少一个规则共性的情况下,将所述第一类规则集合划分出相应的第二类规则集合,其中,所述第二类规则集合包括具有所述至少一个规则共性的一条或多条数据规则;
利用所述规则共性生成与所述第二类规则集合相对应的验证规则模型;
基于所述第二类规则集合与需要符合所述第二类规则集合的字段、标准数据表的关联性,识别出要符合所述第二类规则集合的所述标准数据表中的所述字段;
将所述字段结合到所述验证规则模型中以生成与所述字段相对应的验证脚本;
在所述标准数据表中通过所述验证脚本来验证与所述字段相对应的所有数据单元;以及
当存在不满足所述验证脚本的数据单元时,生成与所述数据单元相关的报错信息。
在根据本公开内容的第一方面的实施例中,在每一个第一类规则集合中判断是否存在至少一个规则共性进一步包括:
提取所述第一类规则集合中的每一条数据规则的关键字;
判断是否存在相同或相似含义的关键字,其中,所述相同或相似含义的关键字作为所述规则共性。
在根据本公开内容的第一方面的实施例中,对于所述第一类规则集合中除了所述第二类规则集合以外的每一个数据规则而言,所述方法进一步包括:
利用所述数据规则生成与所述数据规则相对应的验证规则模型;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于众安在线财产保险股份有限公司,未经众安在线财产保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811226988.8/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置