[发明专利]基于业务功能智能解析的多库分离方法、系统及介质在审

专利信息
申请号: 201910440746.7 申请日: 2019-05-24
公开(公告)号: CN110175163A 公开(公告)日: 2019-08-27
发明(设计)人: 彭澎 申请(专利权)人: 江西尚通科技发展股份有限公司
主分类号: G06F16/21 分类号: G06F16/21;G06F16/215;G06F16/28;G06F17/27
代理公司: 北京酷爱智慧知识产权代理有限公司 11514 代理人: 邹成娇
地址: 330096 江西省南昌市青山湖*** 国省代码: 江西;36
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 访问频率 访问策略 数据库 访问请求 业务数据 智能分析 智能解析 迁移 语句 访问对象信息 数据库对象 对象迁移 访问对象 访问内容 更新数据 迁移策略 前端业务 数据迁移 数据清理 数据物理 探测业务 业务访问 业务功能 语义分析 自动分析 自动迁移 读写 分析 分类 记录
【说明书】:

发明公开了一种基于业务数据智能解析的多库分离方法,包括:获取前端业务数据的访问请求;对访问请求进行语义分析;对访问对象情况进行分析,生成访问策略,根据语句的类型执行相对应的访问策略,对语句访问对象信息进行记录,生成访问频率表;定期智能分析访问频率表中的对象,生成迁移策略;对业务数据进行分析确定访问频率表中需要迁移的对象;将确定需要迁移的对象迁移到相应的数据库中;数据迁移完成后,更新数据访问策略,将迁移前的数据库进行数据清理。该方法对业务访问的数据进行分类和智能分析,能自动分析和探测业务处理数据库对象的访问频率及访问内容,完成对象自动迁移和清理,实现多数据库的数据物理分离、读写分离。

技术领域

本发明涉及数据处理技术领域,具体涉及一种通过业务功能智能解析的多库分离方法、系统、终端及介质。

背景技术

目前大型企业的核心信息化交易系统主要以关系型数据库为主,通过关系型数据库对业务数据进行增删改查操作来实现复杂的业务逻辑,信息化系统的数据库容量基本超过TB级,甚至达PB级。核心数据库中单表数据高达到100G以上,有的甚至达TB级以上,大表查询往往影响数据库的查询效率,影响业务处理流程,系统性能大大降低。

系统设计初期,数据库存储容量规划缺乏有效的数据依据,信息系统设计人员对业务的后期数据增长量评估不准确,导致数据库的存储容量无法承载业务数据。前期规划中存储硬件比较旧,存储硬件支持的容量存在局限性,数据库无法扩容存储,因而需要人工对生产数据库进行人工转储或清理,需要耗费大量的人力及时间成本。同时还需要承担人为误操作而带来的损失;数据迁移之后,前台业务需要通过DBLINK跨数据库的方式对数据进行访问,不但加大了数据库管理员的维护难度,而且严重影响业务系统的性能。

人工对数据库表数据进行数据转储,需要业务人员对预转储的表进行评估,根据业务的访问频率及前台业务需要查询周期来评判该表是否满足转储条件,而核心数据库中表的数量多达上百张,无法对所有表进行评估,因而只有少量的表可进行转储。

发明内容

针对现有技术中的缺陷,本发明实施例提供一种基于业务数据智能解析的多库分离方法、系统、终端及介质,对业务访问的数据进行分类和智能分析,能自动分析和探测业务处理数据库对象的访问频率及访问内容,完成对象自动迁移和清理,实现多数据库的数据物理分离、读写分离。

第一方面,本发明实施例提供的一种基于业务数据智能解析的多库分离方法,包括:

根据不同业务特点对数据库进行分类;

获取前端业务数据的访问请求;

对所述访问请求进行语义分析,根据语句类型对访问请求进行分类;对访问对象情况进行分析,生成访问策略,根据语句的类型执行相对应的访问策略,对语句访问对象信息进行记录,生成访问频率表;定期智能分析访问频率表中的对象,生成迁移策略;

对业务数据进行分析确定访问频率表中需要迁移的对象;将确定需要迁移的对象迁移到相应的数据库中;数据迁移完成后,更新数据访问策略,将迁移前的数据库进行数据清理。

可选地,语句类型包括查询语句和更新语句。

可选地,所述根据语句的类型执行相对应的访问策略的具体方法包括:

若语句类型为查询语句,则判断查询语句所需的访问数据是否在数据缓存区,若是,则直接返回用户访问的数据;若否,则从目标数据库中将访问的数据加载到数据缓存区,再向用户返回访问的数据;

若语句类型为更新语句,则判断更新语句所需的数据块是否在数据缓存区,若是,则在数据缓存区更新数据;若否,则将更新的数据写入目标数据库。

可选地,所述对业务数据进行分析确定访问频率表中需要迁移的对象的具体方法包括:

智能分析访问频率表中的业务数据,根据业务数据的特点生成自动迁移脚本;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江西尚通科技发展股份有限公司,未经江西尚通科技发展股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910440746.7/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code