[发明专利]一种数据同步方法及装置有效
申请号: | 201110169773.9 | 申请日: | 2011-06-22 |
公开(公告)号: | CN102843395A | 公开(公告)日: | 2012-12-26 |
发明(设计)人: | 李智慧;梅庆;桑植;李彦超;雷继斌 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 逯长明;王宝筠 |
地址: | 英属开曼群岛大开曼*** | 国省代码: | 开曼群岛;KY |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 同步 方法 装置 | ||
技术领域
本申请涉及数据处理技术,尤其涉及一种数据同步方法及装置。
背景技术
在一些电子商务网站的效果付费(P4P,Pay For Performance)系统中,是按照效果来付费的,也即在进行广告的收费时,只有用户点击了广告才会进行该广告的扣费。
在现有的P4P系统中,国外用户的广告点击数据一般由设置于国外例如美国的国外数据中心来进行处理,而设置于国内的国内数据中心则主要处理用户和客服人员对于广告商家的账户操作数据,例如修改广告商家的账户金额等。
P4P系统内部维护有各个广告在P4P系统中的位置信息。对于每一广告,不管是国外用户对该广告的点击所引起的对于该广告的扣费数据,还是广告商家修改金额引起的账户变化等账户操作数据,都会导致该广告在P4P系统中的位置发生变化,该位置的变化可以理解为广告在P4P系统中的排名,或者广告在P4P系统中是否可见等。
由于P4P系统中存在设置于不同物理位置的国外数据中心和国内数据中心,而广告的位置变化情况要求两数据中心必须一致。这样,就要求国外数据中心的扣费数据能够同步到国内数据中心,而国内数据中心的账户操作数据能够同步到国外数据中心。而两个数据中心在处理完数据后就要删除被处理的数据,以避免重复操作,影响广告在P4P系统中的位置。
在现有的P4P系统中,进行国外数据中心和国内数据中心之间扣费数据以及账户操作数据等广告位置相关数据的同步时,在国外数据中心和国内数据中心中各设置有1张数据表,用于进行广告位置相关数据的管理,而国外数据中心和国内数据中心中的两张数据表之间需要保证数据的同步,以便国外数据中心和国内数据中心能够读取到相同的数据,进行P4P系统中各个广告位置的计算。也即是说:国外数据中心的第一数据表中增加了一条关于某一广告的扣费数据的记录时,需要将增加的这条记录同步到国外数据中心的第二数据表中,以便国内数据中心也能读取到该条记录,从而使得两数据中心中计算得到的各个广告在P4P系统中的位置一致。
具体的,国外数据中心和国内数据中心之间广告位置相关数据的同步方法包括:预设同步周期,在同步周期指示的每个同步时刻到来时,国外数据中心和国内数据中心之间相互将本地的数据表发送给对端数据中心,以便对端数据中心根据接收到的数据表进行本地数据表的更新。
但是,在以上的数据同步方法中,存在以下的情况发生的可能:国外数据中心在本地的第一数据表中写入了一条关于某一广告的扣费数据的记录,而在下一个同步时刻到来之前,国外数据中心读取并对该条记录进行了处理,这时,国外数据中心将在本地的第一数据表中删除该条记录,以防止本地对该条记录进行重复处理,导致对应广告的位置产生偏差;但是在国外数据中心删除该条记录之前,国外数据中心和国内数据中心之间并未进行数据表的同步,因此,在下一个同步时刻到来时,国内数据中心将无法从国外数据中心获取到该条记录的数据。也即是说,在现有技术中,由于广告位置相关数据的同步和删除是无序进行的,如果出现广告位置相关数据的写入和删除操作均在数据同步之前进行的话,则会出现被写入和删除的上述数据在另一需要同步的数据中心无法读取的情况,造成需要同步的广告位置相关数据的丢失,进而造成国外数据中心和国内数据中心中广告位置的不一致。以上仅仅是以P4P系统中被推荐位置相关数据的同步为例进行说明,而现有技术中多个数据中心之间进行数据同步时的均会遇到各种数据的同步和删除是无序进行的情况,从而导致在一个数据中心被写入和删除的数据在另一需要同步的数据中心无法读取的情况,造成需要同步的数据的丢失。
发明内容
有鉴于此,本申请要解决的技术问题是,提供一种数据同步方法及装置,能够解决由于数据的同步和删除无序进行所导致的同步数据丢失问题。
为此,本申请实施例采用如下技术方案:
本申请实施例提供一种数据的同步方法,每一数据中心中设置数据表集合以及备份文件,该方法还包括:
第一数据中心确定进行数据的写入时,向第一数据中心本地的数据表集合中第一数据中心对应的数据表写入所述数据,并且,将被写入的所述数据同时写入第一数据中心本地的备份文件中;
当同步时刻到来时,将所述备份文件发送到其他数据中心,以便其他数据中心根据所述备份文件更新所述其他数据中心本地的数据表集合。
本申请实施例还提供一种数据同步装置,包括:
写入单元,用于确定进行数据的写入时,向自身所属数据中心本地的数据表集合中自身所属数据中心对应的数据表写入所述数据,并且,将被写入的数据同时写入自身所属数据中心本地的备份文件中;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201110169773.9/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置