[发明专利]基于HBase的保险行业数据整合方法及相关设备

说明书

本说明书一个或多个实施例提供一种基于HBase的保险行业数据整合方法及相关设备；所述方法包括：对保单号做逆序或哈希处理，以所述逆序或哈希处理后的保单号作为开源数据库HBase数据整合模型表的行键rowkey；设置所述HBase数据整合模型表中每一列的列名为待整合的数据源表的表名加所述数据源表每一行的主键值；将所述数据源表的每一行数据分别拼接成JSON字符串，存进所述HBase数据整合模型表的相应字段中。本说明书提供的方法及相关设备，利用HBase技术优势，结合保险行业数据的特点，解决了数据更新难、数据整合过程中性能消耗大，数据整合方案字段扩充代价大的问题。

技术领域

本说明书一个或多个实施例涉及大数据技术领域，尤其涉及一种基于HBase的保险行业数据整合方法及相关设备。

背景技术

保险公司系统建设过程中会采购或开发很多的系统，如核心业务交易系统、客户资源管理系统等，而随着业务发展，系统也在不断演变，产生业务数据的系统也可能会有多个。这些数据对于保险企业来说是宝贵的财富，然而这些财富散落在一个个信息孤岛中，难以发挥其价值。如何将大容量、多类型、快速增长、低价值密度的数据有效的整合，是每个保险公司都面临的难题。

现有技术中，保险行业数据仓库承担数据整合的功能，通常会按照业务过程(如保单、保全、理赔等)建立多个主题表，将多个系统的数据整合到这些主题表中。但是，保险行业特点使其业务数据不只有新增(insert)，而更多的是大量的更新(update)操作，在数据整合的过程中，传统关系型数据库中要处理这些更新要比简单的追加复杂许多，往往需要删除原有的数据，再将更新数据写入，系统性能开销更大。

基于此，需要一种能够实现更新简单、系统性能开销小的数据整合方法。

发明内容

有鉴于此，本说明书一个或多个实施例的目的在于提出一种基于HBase的保险行业数据整合方法及相关设备，以克服现有技术中全部或部分不足。

基于上述目的，本说明书一个或多个实施例提供了一种基于HBase的保险行业数据整合方法，包括：

根据待整合的至少一个数据源表中的保单号确定开源数据库HBase数据整合模型表的行键；

根据所述至少一个数据源表的表名设置所述HBase数据整合模型表的每一列的列名；

将所述至少一个数据源表的每一行数据的字段分别拼接成一个字符串；以及

将所述字符串存入所述HBase数据整合模型表中相应字段中；其中，所述相应字段的行键为由所述字符串对应的保单号确定的行键；所述相应字段的列名为由所述字符串所在数据源表的表名设置的列名。

基于同一发明构思，本说明书一个或多个实施例还提供了一种基于HBase的保险行业数据整合装置，包括：

确定模块，被配置为根据待整合的至少一个数据源表中的保单号确定开源数据库HBase数据整合模型表的行键；

设置模块，被配置为根据所述至少一个数据源表的表名设置所述HBase数据整合模型表的每一列的列名；

拼接与存入模块，将所述至少一个数据源表的每一行数据的字段分别拼接成一个字符串；以及

将所述字符串存入所述HBase数据整合模型表中相应字段中；其中，所述相应字段的行键为由所述字符串对应的保单号确定的行键；所述相应字段的列名为由所述字符串所在数据源表的表名设置的列名。

基于同一发明构思，本说明书一个或多个实施例还提供了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上任意一项所述的方法。