[发明专利]基于Elasticsearch技术的可配置信用档案检索方法及系统

说明书

本发明公开了基于Elasticsearch技术的可配置信用档案检索方法及系统，属于数据搜索领域，本发明要解决的技术问题为传统的数据库无法满足在大数据量的前提下精准快速的返回客户需求数据，采用的技术方案为：该方法是利用elasticsearch的分布式的海量数据搜索与分析的技术，并根据用户自身的需求，通过信用千寻配置和档案配置，进入信用查询页面，实现灵活配置信用档案数据目录，进而提升用户的满意度；千寻配置具体如下：创建索引组；索引管理；变量维护；重建索引；档案配置具体如下：档案集管理；档案管理建立档案目录树；档案模板初始化。本发明还公开了一种基于Elasticsearch技术的可配置信用档案检索系统。

技术领域

本发明涉及数据搜索领域，具体地说是一种基于Elasticsearch技术的可配置信用档案检索方法及系统。

背景技术

elasticsearch：是一个基于Lucene分布式可扩展的实时搜索和分析引擎,可以实现各种字段的查询，排序，分类等逻辑运算，相比传统的关系型数据库mysql，oracle等，它支持海量的、PB级的大数据搜索，依靠其独特的打分机制可以快速精准的定位到信用主体，另外它支持上百个服务节点的扩展。

redis：是一个高性能key-value库，基于内存运行，并支持持久化的Nosql数据库，与传统数据库不同的是Redis的数据是存在内存中的，所以存写速度非常快，因此Redis被广泛应用于缓存方向，另外它还具有丰富的数据类型，包括字符串，哈希，列表，集合，有序集合等。

数据脱敏：针对一部分具有私密信息的数据，如身份证、手机号、邮箱等，可以在档案维护的过程中，为字段设置数据脱敏的规则，即可实现对隐私数据的保护。

随着公共信用信息平台数据归集工作的全面开展，需要在海量数据中快速精准的查询到目标主体(自然人或法人)，并将与该主体关联的多维度信用信息进行全方位展示，以便用户全面掌握主体的信用情况。由于信用信息目录的分支过多，一般项目的档案配置树都会十分庞大，所以在实际查询信用档案的过程中，对于数据库的查询要求高，如果是大量并发的情况下，生成档案的速度会受到一定的限制。

发明内容

本发明的技术任务是提供一种基于Elasticsearch技术的可配置信用档案检索方法及系统，来解决传统的数据库无法满足在大数据量的前提下精准快速的返回客户需求数据的问题。

本发明的技术任务是按以下方式实现的，一种基于Elasticsearch技术的可配置信用档案检索方法，该方法是利用elasticsearch的分布式的海量数据搜索与分析的技术，并根据用户自身的需求，通过信用千寻配置和档案配置，进入信用查询页面，实现灵活配置信用档案数据目录，进而提升用户的满意度。

作为优选，千寻配置具体如下：

创建索引组：创建一个信用查询所需要的索引组，用于区别业务场景；

索引管理：在索引组下创建法人和自然人索引，并关联到具体的数据库表；

变量维护：勾选数据库表里的字段，维护与查询相关的字段，没有必要将全部字段抽进去，以便节省服务器的硬盘空间；

重建索引：将数据库表数据抽取到elasticsearch搜索引擎中去，以便后续的查询和删除操作。

作为优选，档案配置具体如下：

档案集管理：建立档案集，并进行管理；

档案管理建立档案目录树：用户按照自己的需求配置档案目录树或者参照国家标准信用信息目录配置档案目录树；

档案模板初始化：档案配置完成后，需要执行一次档案模板初始化操作，档案模板以XML的形式存入到redis当中，避免了每次档案查询都要遍历庞大的档案树，可以有效地提高查询效率，节省资源。