[发明专利]数据采集方法、装置、设备及计算机可读存储介质有效
申请号: | 201910768083.1 | 申请日: | 2019-08-15 |
公开(公告)号: | CN110502515B | 公开(公告)日: | 2023-06-20 |
发明(设计)人: | 刘雪花 | 申请(专利权)人: | 中国平安财产保险股份有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/25 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 胡海国 |
地址: | 518000 广东省深圳市福田区益田路*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 采集 方法 装置 设备 计算机 可读 存储 介质 | ||
1.一种数据采集方法,其特征在于,所述数据采集方法包括以下步骤:
当接收到基于预设采集口径上传的自助报表时,读取所述自助报表的目标匹配字段以及所述预设采集口径的类型标识;
判断所述目标匹配字段是否和所述类型标识对应,若和所述类型标识对应,则根据所述自助报表,生成待采集报表;
当接收到包含待采集字段的指令时,则根据所述目标匹配字段在所述待采集报表中对应数据列的采集依据信息,采集与各所述待采集字段对应的字段数据,并将各所述字段数据返回到所述待采集报表的空白列;
所述根据所述目标匹配字段在所述待采集报表中对应数据列的采集依据信息,采集与各所述待采集字段对应的字段数据的步骤包括:
读取各所述待采集字段中的字段标识,并将各所述字段标识和各预设敏感标识对比,判断各所述待采集字段中是否具有敏感字段;
若具有敏感字段,则根据所述自助报表对应用户账户的采集权限,以及所述目标匹配字段在所述待采集报表中对应数据列的采集依据信息,采集与各所述待采集字段对应的字段数据;
若不具有敏感字段,则读取所述目标匹配字段在所述待采集报表中对应数据列的采集依据信息,并将各所述采集依据信息和预设数据库对比,采集与各所述待采集字段对应的字段数据;
所述根据所述自助报表对应用户账户的采集权限,以及所述目标匹配字段在所述待采集报表中对应数据列的采集依据信息,采集与各所述待采集字段对应的字段数据的步骤包括:
读取所述用户账户的账户标识,并根据所述账户标识确定所述用户账户是否具有对所述敏感字段进行采集的采集权限;
当具有对所述敏感字段进行采集的采集权限时,则执行读取所述目标匹配字段在所述待采集报表中对应数据的采集依据信息的步骤;
若不具有对所述敏感字段进行采集的采集权限时,则执行读取所述目标匹配字段在所述待采集报表中对应数据的采集依据信息的步骤,并在采集到与所述待采集字段对应的字段数据后,对各所述字段数据进行脱敏处理。
2.如权利要求1所述的数据采集方法,其特征在于,所述在采集到与所述待采集字段对应的字段数据后,对各所述字段数据进行脱敏处理的步骤包括:
读取各所述待采集字段中所具有敏感字段的脱敏规则,并根据所述脱敏规则,对各所述字段数据中与所述敏感字段对应的目标字段数据进行脱敏,其中所述脱敏规则用于对所述目标字段数据进行加密转换的处理;
在各所述目标字段数据均脱敏完成后,用脱敏后的各所述目标字段数据对各所述字段数据进行更新,并将更新的各所述字段数据返回到所述待采集报表的空白列。
3.如权利要求1或2所述的数据采集方法,其特征在于,所述将各所述字段数据返回到所述待采集报表的空白列的步骤之后包括:
当接收到对所述待采集报表的上传请求时,输出再次选择待采集字段的提示信息;
接收基于所述提示信息输入的再次待采集字段,并判断所述再次待采集字段和所述待采集字段之间是否存在相同字段,若存在所述相同字段,则输出重新选择的提示信息;
若不存在所述相同字段,则根据所述目标匹配字段在所述待采集报表中对应数据列的采集依据信息,采集与各所述再次待采集字段对应的再筛选字段数据,并将各所述再筛选字段数据返回到所述待采集报表中的其他空白列。
4.如权利要求3所述的数据采集方法,其特征在于,所述若不存在所述相同字段,则根据所述目标匹配字段在所述待采集报表中对应数据列的采集依据信息,采集与各所述再次待采集字段对应的再筛选字段数据的步骤包括:
判断所述待采集报表中是否存在空白信息,若存在所述空白信息,则将所述空白信息所对应的目标采集依据信息进行删除,并对所述目标采集依据信息输出采集异常的提示信息;
将删除所述目标采集依据信息后的采集依据信息更新为新的采集依据信息,并根据新的所述采集依据信息,采集与各所述再次待采集字段对应的再筛选字段数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安财产保险股份有限公司,未经中国平安财产保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910768083.1/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置