[发明专利]一种基于互联网平台订单大数据的在线数据处理方法

说明书

本发明公开了一种基于互联网平台订单大数据的在线数据处理方法，包括三个步骤：且三个步骤依次为S1、构建处理平台，选择基于STORM模型框架，并加载MEMCACHED、FLUME、KAFKA以及ZOOKEEPER四组模块，S2、卫星数据定位采集单元，通过卫星和基站的通讯手段，对各个用户在线产生的数据进行定位和采集处理，S3、在线数据分类，STORM处理平台再将接收的各用户在线数据按照流格式和串格式两种类型进行分类。通过构建处理平台、卫星数据定位采集单元以及在线数据分类的流程配合，借助通讯卫星和地表基站的精准定位采集方式，预先构建STORM处理平台，实现对海量在线数据进行全面采集和分类处理的效果，具有局限性大、精度低、高迟滞、安全性和效率低的优点。

技术领域

本发明涉及互联网平台订单大数据在线数据处理技术领域，具体为一种基于互联网平台订单大数据的在线数据处理方法。

背景技术

互联网，又称网际网路或音译因特网、英特网，是网络与网络之间所串连成的庞大网络，这些网络以一组通用的协定相连，形成逻辑上的单一巨大国际网络，大数据：以容量大、类型多、存取速度快、应用价值高为主要特征的数据集合，最早应用于IT行业，目前正快速发展为对数量巨大、来源分散、格式多样的数据进行采集、存储和关联分析，从中发现新知识、创造新价值、提升新能力的新一代信息技术和服务业态。大数据必须采用分布式架构，对海量数据进行分布式数据挖掘，因此必须依托云计算的分布式处理、分布式数据库和云存储、虚拟化技术。

随着现在互联网行业的日益发展，现在人们经常借助互联网平台进行在线购物，此过程会产生大量在线订单数据，而对比例用于在线访问的数据处理方法和装置（授权号：CN103678667B）以及基于云端大数据计算的在线教育处理方法及在线教育平台（授权号：CN112100606B）都只是公开了数据处理的局部专注性和安全性功用，且依靠蜂窝流量或无线流量对大量在线订单数据进行分批处理，不能借助通讯卫星和地表基站的精准定位采集方式，预先构建STORM处理平台，对海量在线数据进行全面采集和分类处理，导致现有处理方法存在局限性大、精度低、高迟滞、安全性和效率低的问题，易出现处理方法平台卡顿崩溃的情况，满足不了高峰值时期的在线数据快速性处理需求，为此，提出基于互联网平台订单大数据的在线数据处理方法。

发明内容

本发明的目的在于提供基于互联网平台订单大数据的在线数据处理方法，以解决上述背景技术中提出的不能借助通讯卫星和地表基站的精准定位采集方式，预先构建STORM处理平台，对海量在线数据进行全面采集和分类处理，导致现有处理方法存在局限性大、精度低、高迟滞、安全性和效率低的问题。

为实现上述目的，本发明提供如下技术方案：一种基于互联网平台订单大数据的在线数据处理方法，包括如下步骤：

S1、构建处理平台：选择基于STORM模型框架，并加载MEMCACHED、FLUME、KAFKA以及ZOOKEEPER四组模块，且分别对应在线数据收集、在线数据缓冲、在线数据存储以及在线数据协调功能；

S2、卫星数据定位采集单元：通过卫星和基站的通讯手段，对各个用户在线产生的数据进行定位和采集处理，待各个用户在线产生的数据定位和采集后，首先进入数据预处理阶段，获取各个用户在线数据的日志时间和位置，再利用二进制加密方式对获取的各个用户在线数据信息通过加密通道传送至数据处理阶段，再依次对加密后的各个用户在线数据进行提取、解压以及验证通过后发送至S1构建的STORM处理平台中，并依据位置和时间参数对发送的各用户在线数据进行存储；