[发明专利]数据同步方法、装置、设备及存储介质有效
申请号: | 202210110519.X | 申请日: | 2022-01-28 |
公开(公告)号: | CN114510534B | 公开(公告)日: | 2022-09-06 |
发明(设计)人: | 邓文浩;王兵;林昂;张南锋;谢铭敏;李哲弘;陈炯炯;林文俊;周铎鸿 | 申请(专利权)人: | 广东航宇卫星科技有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/28;G06F16/22 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 吕金金 |
地址: | 515041 广东省汕头市龙*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 同步 方法 装置 设备 存储 介质 | ||
1.一种数据同步方法,其特征在于,包括:
根据源数据库中待同步业务数据的数据表,生成数据库实体关系模型和目标索引表,所述数据库实体关系模型用于表征所述源数据库中数据实体之间的实体关系,所述目标索引表用于记录源数据库的第一数据主键与同步到数据中台后的第二数据主键之间的主键索引关系;
根据所述目标索引表中的主键索引关系,将所述源数据库的数据记录同步至所述数据中台,所述数据记录包含所述待同步业务数据;
根据所述数据库实体关系模型,还原所述数据记录所对应的实体关系,以完成所述源数据库到所述数据中台的数据同步;
所述根据所述目标索引表中的主键索引关系,将所述源数据库的数据记录同步至所述数据中台,包括:
从源数据库中获取所述待同步业务数据对应的数据记录,数据记录包括第一数据主键;
根据所述主键索引关系,将所述数据记录中的第一数据主键替换为所述第二数据主键,生成新的数据记录;
将所述新的数据记录添加至所述数据中台。
2.如权利要求1所述的数据同步方法,其特征在于,所述根据源数据库中待同步业务数据的数据表,生成数据库实体关系模型和目标索引表,包括:
根据业务关系,确定所述源数据库中的待同步业务数据对应的数据表;
根据所述数据表,利用数据库工具DBeaver,创建所述数据库实体关系模型;
根据所述数据库,利用预设的数据库建表语句,创建所述目标索引表。
3.如权利要求2所述的数据同步方法,其特征在于,所述根据所述数据表,利用数据库工具DBeaver,创建所述数据库实体关系模型,包括:
利用所述数据库工具DBeaver,将所述数据表的表结构移植至所述数据中台的模型数据库;
在所述模型数据库,通过配置外键对应关系,建立源数据库与数据中台之间的实体关系,所述外键对应关系为所述源数据库的第一外键与所述数据中台的第二外键之间的对应关系。
4.如权利要求2所述的数据同步方法,其特征在于,所述根据所述数据库,利用预设的数据库建表语句,创建所述目标索引表,包括:
利用所述数据库建表语句,在所述数据表的数据表名称添加预设值,得到初始索引表;
将所述初始索引表的自增值配置为目标自增值,并将所述源数据库的第一数据主键插入到所述初始索引表,得到所述目标索引表。
5.如权利要求4所述的数据同步方法,其特征在于,所述目标自增值为与所述数据中台的数据表相同的自增值。
6.如权利要求1所述的数据同步方法,其特征在于,所述根据所述数据库实体关系模型,还原所述数据记录所对应的实体关系,包括:
根据所述目标索引表,确定每个待同步业务数据的第一外键值;
根据所述数据库实体关系模型中的外键对应关系,将所述第一外键值替换为所述数据记录对应的第二外键值,以还原所述数据记录所对应的实体关系。
7.一种数据同步装置,其特征在于,包括:
生成模块,用于根据源数据库中待同步业务数据的数据表,生成数据库实体关系模型和目标索引表,所述数据库实体关系模型用于表征所述源数据库中数据实体之间的实体关系,所述目标索引表用于记录源数据库的第一数据主键与同步到数据中台后的第二数据主键之间的主键索引关系;
同步模块,用于根据所述目标索引表中的主键索引关系,将所述源数据库的数据记录同步至所述数据中台,所述数据记录包含所述待同步业务数据;
还原模块,用于根据所述数据库实体关系模型,还原所述数据记录所对应的实体关系,以完成所述源数据库到所述数据中台的数据同步;
所述同步模块,包括:
获取单元,用于从源数据库中获取所述待同步业务数据对应的数据记录,数据记录包括第一数据主键;
第一替换单元,用于根据所述主键索引关系,将所述数据记录中的第一数据主键替换为所述第二数据主键,生成新的数据记录;
添加单元,用于将所述新的数据记录添加至所述数据中台。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东航宇卫星科技有限公司,未经广东航宇卫星科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210110519.X/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置