[发明专利]纵向联邦数据统计的去重方法、装置、终端设备及介质在审
申请号: | 202011097860.3 | 申请日: | 2020-10-14 |
公开(公告)号: | CN112231309A | 公开(公告)日: | 2021-01-15 |
发明(设计)人: | 谭明超;马国强;范涛;陈天健;杨强 | 申请(专利权)人: | 深圳前海微众银行股份有限公司 |
主分类号: | G06F16/215 | 分类号: | G06F16/215;G06F21/60;G06N20/00 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 张志江 |
地址: | 518000 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 纵向 联邦 数据 统计 方法 装置 终端设备 介质 | ||
本发明公开了一种纵向联邦数据统计的去重方法、装置、终端设备及存储介质,通过纵向联邦中的任意一个参与方接收纵向联邦中的其他参与方发送的各第一加密值,其中,各所述第一加密值由所述其他参与方基于公钥针对各自的各第一待去重数据进行加密得到;基于所述公钥在本地针对自有数据中的各第二待去重数据进行加密得到各第二加密值;将各所述第一加密值分别与各所述第二加密值进行叠加计算得到各计算结果;确定各所述计算结果中的相同计算结果,并针对所述相同计算结果对应的各所述第一待去重数据和各所述第二待去重数据进行去重处理。本发明能够在确保各参与方数据隐私安全的前提下,有效的对纵向联邦中各参与方各自统计的数据进行去重。
技术领域
本发明涉及联邦数据去重技术领域,尤其涉及一种纵向联邦数据统计的去重方法、装置、终端设备及存储介质。
背景技术
时下,科学技术的发展早已步入数据信息化时代,而针对数据的统计应用也已经变得越来越广泛。在数据统计场景中,针对重复的数据进行去重处理是十分常见的操作,如,用户针对自己本地拥有的数据,选择特定的统计特征,然后,在检测到该统计特征下存在多条数据且该多条数据均相同的情况下,用户即针对该多条相同的数据进行去重从而仅在该统计特征下保留一条数据。
然而,在多个拥有自有数据的用户联合组成纵向的联邦场景之后,基于对各个用户自有数据的隐私安全考虑,则无法采取上述针对用户自有数据去重的方式。如此,尽管在用户针对自有数据进行统计应用的单边场景中,数据去重处理已经被广泛应用,但是,在由多个用户基于自有数据联合组建的联邦场景中,目前的数据去重方式尚无法达成保证用户自有数据隐私安全的要求。
发明内容
本发明的主要目的在于提供一种纵向联邦数据统计的去重方法、装置、终端设备及存储介质,旨在解决现有技术中,纵向联邦场景下的数据统计无法在确保各用户自有数据隐私安全的前提下,针对统计数据执行数据去重处理的技术问题。
为实现上述目的,本发明提供一种纵向联邦数据统计的去重方法,所述纵向联邦数据统计的去重方法应用于纵向联邦中的任意一个参与方,所述纵向联邦数据统计的去重方法包括:
接收纵向联邦中的其他参与方发送的各第一加密值,其中,各所述第一加密值由所述其他参与方基于公钥针对各自的各第一待去重数据进行加密得到;
基于所述公钥在本地针对自有数据中的各第二待去重数据进行加密得到各第二加密值;
将各所述第一加密值分别与各所述第二加密值进行叠加计算得到各计算结果;
确定各所述计算结果中的相同计算结果,并针对所述相同计算结果对应的各所述第一待去重数据和各所述第二待去重数据进行去重处理。
进一步地,所述基于所述公钥在本地针对自有数据中的各第二待去重数据进行加密得到各第二加密值的步骤,包括:
在本地的自有数据中提取各第二待去重数据,并分别对各所述第二待去重数据进行哈希运算得到各哈希值;
利用所述公钥分别对各所述哈希值进行加密得到各第二加密值。
进一步地,所述在本地的自有数据中提取各第二待去重数据的步骤,包括:
接收预设数据去重请求,并解析所述预设数据去重请求得到待去重数据统计特征,其中,所述待去重数据统计特征的数量大于或者等于一;
在本地检测自有数据中各数据标签下属于所述待去重数据统计特征的特征数据;
将相同所述数据标签下的所述特征数据作为一条第二待去重数据,以提取到各所述第二待去重数据。
进一步地,所述将各所述第一加密值分别与各所述第二加密值进行叠加计算得到各计算结果的步骤,包括:
分别检测各所述第一加密值各自在各所述第二加密值中对应位置的目标第二加密值;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳前海微众银行股份有限公司,未经深圳前海微众银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011097860.3/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置