[发明专利]针对保险业的大数据推荐方法、系统以及设备有效
申请号: | 202010277839.5 | 申请日: | 2020-04-10 |
公开(公告)号: | CN111506908B | 公开(公告)日: | 2023-02-17 |
发明(设计)人: | 郭玮;施海;张东锋 | 申请(专利权)人: | 深圳新致软件有限公司 |
主分类号: | G06F21/60 | 分类号: | G06F21/60;G06F21/62;G06F16/182;G06F16/9536;G06Q40/08;H04L67/02 |
代理公司: | 上海正策律师事务所 31271 | 代理人: | 李丽;张晟 |
地址: | 518038 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 针对 保险业 数据 推荐 方法 系统 以及 设备 | ||
1.一种针对保险业的大数据推荐方法,其特征在于,所述针对保险业的大数据推荐方法包括以下步骤:
(A)构建保险业大数据中心,将用户相关数据存贮到HDFS系统上,进行分布式存储;
(B)通过Spark大数据并行计算框架执行分布式数据处理与计算,并且通过Kafka分布式发布订阅消息系统通道进行日志消息的处理;
(C)基于人口统计学数据的改进聚类模型,根据用户的属性分为不同的组,在不同组内执行推荐算法;
以及
(D)通过ECharts开源可视化库与WebSocket全双工通信协议执行前端动态可视化显示;
其中在所述步骤(A)中,采用https协议从而提升推荐接口的安全性;
其中在所述步骤(A)中,限制同一IP地址的频繁访问,并对用户鉴权,对接口中涉及的隐私或者机密信息进行加密处理;
其中对接口进行了鲁棒性设计,从而使获取的推荐数据中存在的错误做异常保护;
其中执行分布式实时搜索,处理结构化或非结构化客户与产品数据,提供数据分析与各种历史统计信息的查询,辅助保险业进行商业决策;
其中所述针对保险业的大数据推荐方法还包括步骤:当分布式存储的新数据达到阈值时,触发推荐模型在后台进行训练,并自动构建新的推荐模型;
其中所述针对保险业的大数据推荐方法还包括冷启动问题解决步骤:基于热门数据推荐以及保险业务的属性数据优化推荐模型;
其中所述步骤(C)中,还包括步骤:通过Stacking堆叠技术,执行GBDT梯度提升迭代决策树算法、LR算法、ItemCF基于物品的协同过滤算法以及UserCF基于用户的协同过滤算法的组合算法;
其中采用ElasticSearch以执行分布式实时搜索,提供数据分析与各种历史统计信息的查询,以辅助保险业进行商业决策;
其中在Kafka管道和web服务模块之间配置推荐结果存储模块。
2.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时执行权利要求1中所述的针对保险业的大数据推荐方法的步骤。
3.一种针对保险业的大数据推荐设备,其特征在于,包括:
存储器,用于存储软件应用程序,
处理器,用于执行所述软件应用程序,所述软件应用程序进一步包括:
分布式存储程序,其被配置为构建保险业大数据中心,将用户相关数据存贮到HDFS系统上,进行分布式存储,其中,采用https协议从而提升推荐接口的安全性,限制同一IP地址的频繁访问,并对用户鉴权,对接口中涉及的隐私或者机密信息进行加密处理,对接口进行了鲁棒性设计,从而使获取的推荐数据中存在的错误做异常保护;
保险业推荐模型构建程序,其被配置为通过Spark大数据并行计算框架执行分布式数据处理与计算,并且通过Kafka分布式发布订阅消息系统通道进行日志消息的处理,基于人口统计学数据的改进聚类模型,根据用户的属性分为不同的组,在不同组内执行推荐算法;以及
前端动态可视化显示程序,其被配置为通过ECharts开源可视化库与WebSocket全双工通信协议执行前端动态可视化显示;
其中采用ElasticSearch执行分布式实时搜索,提供数据分析与各种历史统计信息的查询,以辅助保险业进行商业决策;
其中通过Stacking堆叠技术,执行GBDT梯度提升迭代决策树算法、LR算法、ItemCF基于物品的协同过滤算法以及UserCF基于用户的协同过滤算法的组合算法;
其中当分布式存储的新数据达到阈值时,触发推荐模型在后台进行训练,并自动构建新的推荐模型,其中基于热门数据推荐以及保险业务的属性数据优化推荐模型;
其中在Kafka管道和web服务模块之间配置推荐结果存储模块。
4.一种针对保险业的大数据推荐系统,其特征在于,所述针对保险业的大数据推荐系统包括分布式存储装置、保险业推荐模型构建装置以及前端动态可视化显示装置,其中所述分布式存储装置被配置为构建保险业大数据中心,将用户相关数据存贮到HDFS系统上,进行分布式存储,其中,采用https协议从而提升推荐接口的安全性,限制同一IP地址的频繁访问,并对用户鉴权,对接口中涉及的隐私或者机密信息进行加密处理,对接口进行了鲁棒性设计,从而使获取的推荐数据中存在的错误做异常保护,其中所述保险业推荐模型构建装置通过Spark大数据并行计算框架执行分布式数据处理与计算,并且通过Kafka分布式发布订阅消息系统通道进行日志消息的处理,基于人口统计学数据的改进聚类模型,根据用户的属性分为不同的组,在不同组内执行推荐算法,其中所述前端动态可视化显示装置通过ECharts开源可视化库与WebSocket全双工通信协议执行前端动态可视化显示,其中所述针对保险业的大数据推荐系统还被配置为:执行分布式实时搜索,处理结构化或非结构化客户与产品数据,提供数据分析与各种历史统计信息的查询,辅助保险业进行商业决策;其中所述保险业推荐模型构建装置还被配置为:通过Stacking堆叠技术,执行GBDT梯度提升迭代决策树算法、LR算法、ItemCF基于物品的协同过滤算法以及UserCF基于用户的协同过滤算法的组合算法;其中所述针对保险业的大数据推荐系统还包括保险业推荐模型训练更新装置,当分布式存储的新数据达到阈值时,所述保险业推荐模型训练更新装置被触发,训练并自动构建新的推荐模型;其中在Kafka管道和web服务模块之间配置推荐结果存储模块。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳新致软件有限公司,未经深圳新致软件有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010277839.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:储物柜应用方法、设备和存储介质
- 下一篇:一种防反接装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置