[发明专利]一种基于营销业务两级三线体系框架的运维构建方法

说明书

本发明提供一种基于营销业务两级三线体系框架的运维构建方法，包括下述步骤：一、调整同步架构：二、降低同步延迟：三、优化同步软件配置：四、实现数据一致性：五、分散各业务trail文件：六、增强ogg安全及故障切换能力：七、存储分离或硬件扩容。重新梳理同步架构并加以调整和优化，最终保证各业务系统之间数据同步的及时性和完整性。

技术领域

本发明涉及电力数据处理技术领域，具体为一种基于营销业务两级三线体系框架的运维构建方法。

背景技术

国网辽宁电力有限公司(以下简称辽宁公司)营销部门有多套业务系统使用OGG及SHAREPLEX软件进行数据同步，涉及的业务系统多、同步机制复杂、同步数据量巨大。另外还有部分业务系统的数据需要与国网进行数据同步，接受国网考核。

随着国网辽宁电力有限公司(以下简称辽宁公司)各业务系统规模发展，系统之间的数据同步业务需求进一步增多。业务系统对数据同步实时性要求较高，但现有数据同步架构存在一定问题，主要有以下几点：

1、同步环节众多，流程复杂：数据在流动中需要经过多个环节，多的需要经过4个中间数据库节点才能到达最终目的地，如果中间环节遇到问题，后面的所有环节都受到影响，具有连带效应。

2、同步延时较大：有时会有部分业务的同步数据出现同步延时，造成延时的原因有多种，主要有架构复杂，同步软件bug，业务变化数据量突增，硬件资源瓶颈等。

3、数据存在不一致现象：部分业务表经检查发现存在历史数据目标端与源端不一致现象。造成数据不一致现象的原因也有几种，比如同步规则复杂(有的表是异构表，有的表还出现转码操作，源端及目标端的主键列不同等)；或者当在维护过程中遇到无法解决问题(归档丢失，进程异常无法启动等)时，为实现业务连续，要通过跳过部分数据解决。

4、部分业务系统的ogg软件版本不匹配并遇到bug：该问题主要集中在营销采集数据库，当触发bug时，ogg进程会宕掉，需要人为干预才能修复。

5、当前ogg缺乏故障切换机制：目前各业务数据库都为RAC架构，ogg部署在单个节点上，当遇到单个节点实例或主机遇到故障时，虽然数据库仍然能使用，但ogg已经无法进行同步操作

由于存在以上问题，当前同步架构已无法满足各业务对数据及时性、完整性的需求。为解决辽宁公司业务统之间数据同步延时高和数据同步不一致的情况，辽宁公司计划重新梳理同步软件架构并加以调整和优化，最终保证辽宁公司各业务系统之间数据同步的及时性和完整性。

发明内容

本发明要解决的技术问题是，提供一种基于营销业务两级三线体系框架的运维构建方法，主要涉及营销数据业务，营销业务系统查询数据库是一个中间环节，费控业务，同业对标以及基础数据平台的数据，都需要经它进行中转。同时，查询库的数据是由营销业务生产数据库通过shareplex软件同步来的，营销稽查1期数据库也是如此。这样的架构会带来一系列问题：shareplex软件维护难度较高，现场人员基本只能做启动停止进程类的操作，一旦遇到故障同步中止，可能需要较长修复时间，导致整体数据同步出现延时。

采用的技术方案为：

一种基于营销业务两级三线体系框架的运维构建方法，包括下述步骤：

一、调整同步架构：

(1)调整费控数据流向：

1.在营销生产端创建针对费控数据的ogg新抽取进程，不启动；

2.在营销生产端创建针对费控数据的ogg新传输进程，指向费控数据库；

3.在费控数据库主机创建ogg新复制进程，不启动；

4.停止营销生产对应费控的业务；