[发明专利]数据处理方法及装置、电子设备和计算机可读存储介质在审
申请号: | 202211043697.1 | 申请日: | 2022-08-29 |
公开(公告)号: | CN115687513A | 公开(公告)日: | 2023-02-03 |
发明(设计)人: | 张瑞华;梁汨;杨婷婷;白新天 | 申请(专利权)人: | 中国工商银行股份有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/2455 |
代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 孙蕾 |
地址: | 100140 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 电子设备 计算机 可读 存储 介质 | ||
本公开提供了一种数据处理方法及装置、电子设备和计算机可读存储介质,可以应用于大数据技术领域和金融领域。该数据处理方法包括:响应于检测到针对数据湖的数据查询指令,执行数据查询指令,得到参考对象数据,其中,参考对象数据用于表征与目标对象的关注操作相关的第一对象数据,关注操作是目标对象在利用程序产品的过程中产生的操作;根据参考对象数据和本地数据库的本地对象数据集,确定待处理本地对象数据;根据应用侧对象数据、待处理本地对象数据和数据湖中的存量对象数据,得到目标本地对象数据和目标存量对象数据,其中,目标存量对象数据包括目标本地对象数据,目标本地对象数据和目标存量对象数据均与应用侧对象数据保持一致。
技术领域
本公开涉及大数据技术领域和金融领域,更具体地,涉及一种数据处理方法及装置、电子设备、计算机可读存储介质和计算机程序产品。
背景技术
随着数据处理技术的发展,各种结构化数据、半结构化数据、非结构化数据和二进制数据呈现指数级增长,而传统数据库难以存储和分析这些数据的内容,因而通常使用数据湖等大数据技术对这些数据进行处理。
在实现本公开构思的过程中,发明人发现相关技术中至少存在如下问题:在出现网络抖动的情况下,难以保证本地数据库和数据湖中的对象数据的准确性。
发明内容
有鉴于此,本公开提供了一种数据处理方法及装置、电子设备、计算机可读存储介质和计算机程序产品。
根据本公开的一个方面,提供了一种数据处理方法,包括:
响应于检测到针对数据湖的数据查询指令,执行上述数据查询指令,得到参考对象数据,其中,上述参考对象数据用于表征与目标对象的关注操作相关的第一对象数据,上述关注操作是上述目标对象在利用程序产品的过程中产生的操作;
根据上述参考对象数据和本地数据库的本地对象数据集,确定待处理本地对象数据,其中,上述本地对象数据集用于表征与上述目标对象的关注操作相关的第二对象数据;以及
根据应用侧对象数据、上述待处理本地对象数据和上述数据湖中的存量对象数据,得到目标本地对象数据和目标存量对象数据,其中,上述目标存量对象数据包括上述目标本地对象数据,上述目标本地对象数据和上述目标存量对象数据均与上述应用侧对象数据保持一致。
根据本公开的实施例,上述参考对象数据包括参考平台对象标识和参考私域对象标识。
其中,上述本地对象数据集包括第一本地对象数据集和第二本地对象数据集;
其中,上述第一本地对象数据集包括第一本地私域对象标识和第一本地平台对象标识;
根据本公开的实施例,上述根据上述参考对象数据和本地对象数据集,确定待处理本地对象数据,包括:
在确定目标第一本地平台对象标识与上述参考平台对象标识不匹配的情况下,根据上述参考对象数据和上述第二本地对象数据集,得到上述待处理本地对象数据,其中,上述目标第一本地平台对象标识是与目标第一本地私域对象标识关联的第一本地平台对象标识,上述目标第一本地私域对象标识是上述第一本地对象数据集中与上述参考私域对象标识相匹配的第一本地私域对象标识。
根据本公开的实施例,上述本地对象数据集还包括第三本地对象数据集;
上述方法还包括:
在确定上述目标第一本地平台对象标识与上述参考平台对象标识相匹配的情况下,根据上述参考对象数据、上述第二本地对象数据集和上述第三本地对象数据集,得到上述待处理本地对象数据。
根据本公开的实施例,上述第二本地对象数据集包括第二本地私域对象标识。
根据本公开的实施例,上述根据上述参考对象数据和上述第二本地对象数据集,得到上述待处理本地对象数据,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国工商银行股份有限公司,未经中国工商银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211043697.1/2.html,转载请声明来源钻瓜专利网。