[发明专利]一种基于营销业务两级三线体系框架的运维构建方法

摘要

本发明提供一种基于营销业务两级三线体系框架的运维构建方法，包括下述步骤：一、调整同步架构：二、降低同步延迟：三、优化同步软件配置：四、实现数据一致性：五、分散各业务trail文件：六、增强ogg安全及故障切换能力：七、存储分离或硬件扩容。重新梳理同步架构并加以调整和优化，最终保证各业务系统之间数据同步的及时性和完整性。

主权项

1.一种基于营销业务两级三线体系框架的运维构建方法，其特征在于：包括下述步骤：一、调整同步架构：(1)调整费控数据流向：1.在营销生产端创建针对费控数据的ogg新抽取进程，不启动；2.在营销生产端创建针对费控数据的ogg新传输进程，指向费控数据库；3.在费控数据库主机创建ogg新复制进程，不启动；4.停止营销生产对应费控的业务；5.待查询库到费控库传输延迟为0，停止查询库到费控库的数据同步；6.启动营销生产源端ogg抽取进程；7.启动营销生产源端ogg传输进程；8.启动费控库目标端ogg复制进程；(2)调整营销业务生产数据流向；1.在营销生产端创建针对营销生产数据的ogg新抽取进程，不启动；2.在营销生产端创建针对营销生产数据的ogg新传输进程，指向基础数据平台数据库；3.在基础数据平台数据库主机创建ogg新复制进程，不启动；4.停止营销生产业务；5.待查询库到基础数据平台传输延迟为0，停止查询库到基础数据平台数据同步；6.启动营销生产源端ogg抽取进程；7.启动营销生产源端ogg传输进程；8.启动基础数据平台目标端ogg复制进程；(3)取消电动汽车业务数据同步；1.确认电动汽车业务无需同步；2.在基础数据平台(86.1)删除进程；(4)调整全业务数据中心数据来源；1.梳理全业务数据中心所需业务数据；2.逐一配置各业务到全业务数据中心数据ogg同步进程；3.停止基础数据平台对应全业务数据中心的数据抽取及传输；4.有必要的情况下进行全业务数据中心数据初始化；(5)调整掌上电力对比业务数据源；(6)为同期线损及营配调贯通指标考核等业务搭建新基础数据平台；(7)将稽查一期数据库同步软件由shareplex替换为ogg；1.在营销生产端创建针对营销稽查数据的ogg新抽取进程，不启动；2.在营销生产端创建针对营销稽查数据的ogg新传输进程，指向查询数据库；3.在营销稽查数据库主机创建ogg新复制进程，不启动；4.停止营销稽查业务；5.停止shareplex针对营销稽查的数据同步；6.启动营销生产源端ogg抽取进程；7.启动营销生产源端ogg传输进程；8.启动营销稽查目标端ogg复制进程；(8)搭建基础数据平台ADG，并切换ogg源端抽取及传输至备库；1.搭建基础数据平台ADG；2.在ADG的备端部署抽取及传输进程，分别指向多套目标业务系统数据库；3.停止ADG主端对应多套目标业务系统数据库的抽取及传输进程，并记录日志号及偏移地址；4.设定ADG备端抽取进程日志号及偏移地址；5.设定ADG备端传输进程的远程trail文件号；6.启动ADG备端抽取进程及传输进程；7.调整多套目标业务系统数据库的复制进程，指向新trail文件；二、降低同步延迟：(1)将对实时性要求高的表拆分成独立进程；1.梳理各重要业务(营销生产，费控等)对实时性要求高的表；2.从shareplex或者整合ogg进程中拆分出来，单独用ogg进行复制；(2)通过自动化运维脚本迅速解决常见故障；(3)将存在延迟问题的进程拆分；(4)调优数据库性能；(5)规范同步源端及目标端表结构变更流程；三、优化同步软件配置：(1)升级ogg软件；采集业务数据库之前由oracle 10g升级为oracle 11g；(2)优化营销费控‑>基础数据平台ogg进程；目标端去掉复制进程中重复apply的表；(3)优化营销查询‑>费控业务ogg进程；1.目标端去掉复制进程中重复apply的表；2.删除不必要的进程；3.删除源端多余的表；(4)优化营销查询‑>基础数据平台ogg进程；删除源端多余的表；采集进程extlnyxc抽取多余表；(5)优化用电信息采集‑>基础数据平台ogg进程；1.删除源端多余的表；源端抽取了多余的表EDAS.E_MP_ENERGY_CURVE；2.目标端去掉复制进程中重复apply的表；(6)优化计量网省中间库ogg进程；1.营销生产业务‑>计量网省中间库；目标端去掉复制进程中重复apply的表；2.计量调度生产‑>计量网省中间库；删除源端的抽取和复制进程；(7)优化计量资产寿命ogg进程；1.计量调度生产‑>计量资产寿命；删除源端多余的表；源端抓取多余表；目标端去掉复制进程中重复apply的表；2.营销基础数据平台‑>计量资产寿命；目标端去掉复制进程中重复apply的表；(8)重点保障营销查询业务表；当前使用shareplex同步的查询库里的表C_CUST、C_CONTACT需要重点保障；可单独使用ogg进行同步；四、实现数据一致性：(1)补足缺失数据；(2)数据初始化；五、分散各业务trail文件：六、增强ogg安全及故障切换能力：(1)将ogg本地盘替换为存储盘；(2)增加ogg故障切换能力；ogg需要进行故障切换的场景分两种：1.ogg所在主机实例宕；为ogg增加备用配置文件，配置文件中将本地连接串改为通过监听连接另一实例的连接串；2.ogg所在主机节点宕；将ogg所用磁盘替换为共享磁盘，并制定切换预案，当遇到主机宕机时，按照预案将ogg所在vg切换到另一节点并启动。为目标端ogg增加源端传输进程的备用配置文件，当遇到目标端ogg切换节点时，传输进程使用备用配置文件；七、存储分离或硬件扩容。