[发明专利]数据处理方法、装置以及电子设备在审
申请号: | 202011573215.4 | 申请日: | 2020-12-25 |
公开(公告)号: | CN112613764A | 公开(公告)日: | 2021-04-06 |
发明(设计)人: | 任亮;傅雨梅;王超;曹丙杰;刘书杰;赵大卫 | 申请(专利权)人: | 北京知因智慧科技有限公司 |
主分类号: | G06Q10/06 | 分类号: | G06Q10/06;G06F16/215 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 董艳芳 |
地址: | 100000 北京市西城区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 以及 电子设备 | ||
1.一种数据处理方法,其特征在于,所述方法包括:
根据预设数据标准模板生成数据标准规则;
根据所述数据标准规则确定第一待检测数据中的第一源字段;
当所述第一源字段缺失时,确定缺失的所述第一源字段对应的第一数据为第一风险数据。
2.根据权利要求1所述的数据处理方法,其特征在于,当确定所述第一待检测数据中无所述第一风险数据时,所述方法还包括:
基于所述数据标准规则,确定所述第一源字段对应的第二待检测数据中的第二源字段;
当所述第二源字段缺失时,确定缺失的所述第二源字段对应的第二数据为第二风险数据;
将所述第一源字段对应的所述第一数据确定为所述第二数据。
3.根据权利要求1所述的数据处理方法,其特征在于,所述数据标准规则的类型包括:预设基本属性、预设业务属性、预设技术属性及预设管控属性;所述根据所述数据标准规则确定第一待检测数据中的第一源字段的步骤,包括:
依次根据所述预设基本属性、所述预设业务属性、所述预设技术属性及所述预设管控属性确定第一待检测数据中的第一源字段。
4.根据权利要求3所述的数据处理方法,其特征在于,所述当所述第一源字段缺失时,确定缺失的所述第一源字段对应的第一数据为第一风险数据的步骤,包括:
当根据所述数据标准规则中的任一个类型确定第一待检测数据中的第一源字段,所述第一源字段缺失时,确定缺失的所述第一源字段对应的第一数据为第一风险数据。
5.根据权利要求1-2任一项所述的数据处理方法,其特征在于,所述方法还包括:
通过自动调度方法对所述第一待检测数据和/或所述第二待检测数据进行检测,并根据检测得到的所述第一风险数据和/或所述第二风险数据生成数据质量报告。
6.根据权利要求1所述的数据处理方法,其特征在于,所述方法还包括:
如果所述第一待检测数据中存在所述数据标准规则之外的第三源字段,判断所述第三源字段是否符合所述数据标准规则的预设范围;
如果所述第三源字段符合所述预设范围,根据所述第三源字段更新所述数据标准规则。
7.根据权利要求1所述的数据处理方法,其特征在于,所述方法还包括:
确定所述第一待检测数据及所述第二待检测数据的优先级,并根据所述优先级对所述第一待检测数据及所述第二待检测数据进行检测。
8.一种数据处理装置,其特征在于,包括:
生成模块,用于根据预设数据标准模板生成数据标准规则;
第一确定模块,用于根据所述数据标准规则确定第一待检测数据中的第一源字段;
第二确定模块,用于当所述第一源字段缺失时,确定缺失的所述第一源字段对应的第一数据为第一风险数据。
9.一种电子设备,包括存储器、处理器,所述存储器中存储有可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现上述权利要求1至7任一项所述的方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机可运行指令,所述计算机可运行指令在被处理器调用和运行时,所述计算机可运行指令促使所述处理器运行所述权利要求1至7任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京知因智慧科技有限公司,未经北京知因智慧科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011573215.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种麻醉科用手术室内注射器销毁装置
- 下一篇:一种新型驱动电机
- 同类专利
- 专利分类
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法;其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政;管理
G06Q10-02 .预定,例如用于门票、服务或事件的
G06Q10-04 .预测或优化,例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理,例如组织、规划、调度或分配时间、人员或机器资源;企业规划;组织模型
G06Q10-08 .物流,例如仓储、装货、配送或运输;存货或库存管理,例如订货、采购或平衡订单
G06Q10-10 .办公自动化,例如电子邮件或群件的计算机辅助管理