[发明专利]数据仓库内数据处理方法、装置、计算机设备和存储介质有效
申请号: | 201810948608.5 | 申请日: | 2018-08-20 |
公开(公告)号: | CN109213764B | 公开(公告)日: | 2023-08-22 |
发明(设计)人: | 潘晨光;张小松;程春霞 | 申请(专利权)人: | 中国平安财产保险股份有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/25 |
代理公司: | 深圳市明日今典知识产权代理事务所(普通合伙) 44343 | 代理人: | 王杰辉 |
地址: | 518000 广东省深圳市福田区益田路*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据仓库 数据处理 方法 装置 计算机 设备 存储 介质 | ||
1.一种数据仓库内数据处理方法,其特征在于,所述数据仓库至少包括冷数据存储区和热数据存储区;其中,所述冷数据存储区用于存储已结案的单据数据,热数据存储区用于存储未结案的单据数据;所述数据处理方法,包括:
获取当前系统的时间信息;
判断所述时间信息是否为预设的繁忙时间;
若所述时间信息是预设的繁忙时间,则只对所述热数据存储区内的未结案的单据数据进行逻辑处理;
若所述时间信息不是预设的所述繁忙时间,则判断所述时间信息是否为预设的空闲时间;
若判定所述时间信息是空闲时间,则对所述冷数据存储区和热数据存储区中的单据数据进行全量逻辑处理;
所述只对所述热数据存储区内的单据数据进行逻辑处理的步骤之后,还包括:
获取所述冷数据存储区中被逻辑处理的次数等于第一阈值,且未被更新的第一单据数据;其中,所述第一单据数据是被处理了第一阈值次数,仍然没有更新的已结案的单据数据;
将所述第一单据数据存储到预设的逻辑处理隔离区;其中,所述逻辑处理隔离区是指对数据仓库数据全量逻辑处理时仍然不会被调用的存储空间。
2.根据权利要求1所述的数据仓库内数据处理方法,其特征在于,所述判断所述时间信息是否为预设的繁忙时间的步骤之前,包括:
获取所述数据仓库内各单据数据的案件状态;
将已结案的单据数据存储到所述冷数据存储区,以及将未结案的单据数据标存储到所述热数据存储区。
3.根据权利要求1所述的数据仓库内数据处理方法,其特征在于,所述只对所述热数据存储区内的单据数据进行逻辑处理的步骤,包括:
当日第一次对热数据存储区中的单据数据进行逻辑处理时,对热数据存储区内的单据数据进行案件状态分类;
将处于已结案状态的单据数据插入到所述冷数据存储区内;
对热数据存储区中剩余的单据数据进行逻辑处理。
4.根据权利要求1所述的数据仓库内数据处理方法,其特征在于,所述只对所述热数据存储区内的单据数据进行逻辑处理的步骤之前,包括:
获取当日产生的新的单据数据,并将所述新的单据数据插入到所述热数据存储区中。
5.根据权利要求1所述的数据仓库内数据处理方法,其特征在于,所述只对所述热数据存储区内的单据数据进行逻辑处理的步骤之后,还包括:
获取所述冷数据存储区中结案日期与当前日期之间的时间差等于第二阈值,且未被更新的第二单据数据;
将所述第二单据数据存储到预设的逻辑处理隔离区。
6.一种数据仓库内数据处理装置,其特征在于,所述数据仓库至少包括冷数据存储区和热数据存储区;其中,所述冷数据存储区用于存储已结案的单据数据,热数据存储区用于存储未结案的单据数据;所述数据处理装置,包括:
第一获取单元,用于获取当前系统的时间信息;
第一判断单元,用于判断所述时间信息是否为预设的繁忙时间;
处理单元,用于若所述时间信息是预设的繁忙时间,则只对所述热数据存储区内的单据数据进行逻辑处理;
第二判断单元,用于若所述时间信息不是预设的所述繁忙时间,则判断所述时间信息是否为预设的空闲时间;
全处理单元,用于若判定所述时间信息是空闲时间,则对所述冷数据存储区和热数据存储区中的单据数据进行全量逻辑处理;
第二获取单元,用于获取冷数据存储区中被逻辑处理的次数等于第一阈值,且未被更新的第一单据数据;其中,所述第一单据数据是被处理了第一阈值次数,仍然没有更新的已结案的单据数据;
第一存储单元,用于将所述第一单据数据存储到预设的逻辑处理隔离区;其中,所述逻辑处理隔离区是指对数据仓库数据全量逻辑处理时仍然不会被调用的存储空间。
7.根据权利要求6所述的数据仓库内数据处理装置,其特征在于,还包括:
获取状态单元,用于获取所述数据仓库内各单据数据的案件状态;
标记存储单元,用于将已结案的单据数据存储到所述冷数据存储区,以及将未结案的单据数据存储到所述热数据存储区。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安财产保险股份有限公司,未经中国平安财产保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810948608.5/1.html,转载请声明来源钻瓜专利网。