[发明专利]物联网海量业务话单处理系统、方法、装置及存储介质

说明书

本发明公开了物联网海量业务话单处理系统、方法、装置及存储介质，包括：应用软件服务层，用于采集第一业务话单，并对第一业务话单进行格式化、分析、去重、合并以及分发处理得到第一话单文件和第一话单消息，进而上传第一话单文件和第一话单消息；平台环境服务层，部署有分布式文件系统、分布式协调服务、资料数据库以及流式处理框架，用于接收第一话单文件和第一话单消息，并根据第一话单文件对资料数据库进行全量同步，根据第一话单消息对资料数据库进行增量同步；基础设施服务层，包括底层云主机，用于提供计算资源池、存储资源池以及网络资源池。本发明提高了业务话单的处理效率，也优化了用户的使用感知，可广泛应用于数据处理技术领域。

技术领域

本发明涉及数据处理技术领域，尤其是一种物联网海量业务话单处理系统、方法、装置及存储介质。

背景技术

目前随着工业物联网的不断发展，客户对物联网的使用需求在不断增加，物联网的开卡量也不断上升，随着用户数的不断增加，话单数也呈现出指数级的增长，原有的系统架构已经不能支撑海量用户数据话单的处理，需要开发一套新的系统架构来支撑目前的用户的话单的处理，从而能对用户进行实时的计费、分析，提供用户实时的查询和定制化的使用。

因物联网业务的独特性，用户大多会对流量使用敏感，需要对已经使用的流量总量、使用详情进行实时/准实时的查询，同时物联网业务根据工信部的要求，有限额管控和大量达量断网的场景，导致无法像人联网一样可以适当减少话单的数量无法，拉长话单的生产时间，增加话单使用流量的落单机制。目前日均话单量达到32亿，基于HBASE处理话单的模式已经出现了瓶颈，但是使用量的汇聚计算通过原连接数持续增长，系统支撑能力需要持续增强，因此需要对计费架构进行整体优化，需要一个新的技术架构来实时/准实时处理海量物联网用户数据话单。

发明内容

本发明的目的在于至少一定程度上解决现有技术中存在的技术问题之一。

为此，本发明实施例的一个目的在于提供一种高效的物联网海量业务话单处理系统。

本发明实施例的另一个目的在于提供一种物联网海量业务话单处理方法。

为了达到上述技术目的，本发明实施例所采取的技术方案包括：

第一方面，本发明实施例提供了一种物联网海量业务话单处理系统，包括：

应用软件服务层，所述应用软件服务层用于采集第一业务话单，并对所述第一业务话单进行格式化、分析、去重、合并以及分发处理得到第一话单文件和第一话单消息，进而上传所述第一话单文件和所述第一话单消息；

平台环境服务层，所述平台环境服务层部署有分布式文件系统、分布式协调服务、资料数据库以及流式处理框架，所述平台环境服务层用于接收所述第一话单文件和所述第一话单消息，并根据所述第一话单文件对所述资料数据库存储的话单数据进行全量同步，根据所述第一话单消息对所述资料数据库存储的话单数据进行增量同步；

基础设施服务层，所述基础设施服务层包括底层云主机，所述底层云主机用于提供计算资源池、存储资源池以及网络资源池。

进一步地，在本发明的一个实施例中，所述应用软件服务层包括：

采集引擎，所述采集引擎用于采集物联网话单网元设备的所述第一业务话单；

全流程引擎，所述全流程引擎用于对所述第一业务话单和所述资料数据库存储的用户资料信息进行格式化、分析、去重、合并以及分发处理得到所述第一话单文件和所述第一话单消息；

上传引擎，所述上传引擎用于上传所述第一话单文件和所述第一话单消息。

进一步地，在本发明的一个实施例中，所述全流程引擎包括：

格式化单元，所述格式化单元用于对所述第一业务话单进行格式化处理得到第二话单文件和第二话单消息；