[发明专利]基于SPARK技术的移动终端数据流处理方法及系统有效
申请号: | 201710945521.8 | 申请日: | 2017-10-12 |
公开(公告)号: | CN107766214B | 公开(公告)日: | 2020-12-25 |
发明(设计)人: | 冯建彪 | 申请(专利权)人: | 南京熊猫电子股份有限公司;南京熊猫通信科技有限公司 |
主分类号: | G06F11/32 | 分类号: | G06F11/32;G06F11/34 |
代理公司: | 南京瑞弘专利商标事务所(普通合伙) 32249 | 代理人: | 向妮 |
地址: | 210016 *** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提出一种基于SPARK技术的移动终端数据流处理方法及系统,移动终端专用应用软件记录下终端运行时产生的位置信息、用户的操作轨迹、终端内部各模块的运行状态等移动终端运行日志数据,经过无线网络传送至后台数据服务中心,数据服务中心在收到数据后使用大数据SPARK集群进行计算分析,将处理后的有价值数据进行前端实时展示、后台数据库存储或其它基于此类数据的增值应用。使用本方法,在移动终端集群侧,可以发送较为全面的、可自定义数据流报文格式的各类数据;在数据服务中心侧,则可以采用由多台廉价的PC机组成SPARK计算集群实现对此类数据的分析和处理,且具备时效性,能为上层做决策提供数据支撑。 | ||
搜索关键词: | 基于 spark 技术 移动 终端 数据流 处理 方法 系统 | ||
【主权项】:
基于SPARK技术的移动终端数据流处理方法,其特征在于,接收移动终端集群侧发送的数据报文;对接收到的数据报文进行解码,并将解码后的数据流作为数据源发送至SPARK大数据计算集群;SPARK大数据计算集群采用SPARK技术对解码后的数据流进行数据分析处理和提取,以供后续调用。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京熊猫电子股份有限公司;南京熊猫通信科技有限公司,未经南京熊猫电子股份有限公司;南京熊猫通信科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710945521.8/,转载请声明来源钻瓜专利网。
- 上一篇:确定应用程序的安装状态的方法及装置
- 下一篇:一种带清洁装置的网卡卡槽