[发明专利]一种位置数据的处理方法、装置、服务器及存储介质有效
申请号: | 201811317436.8 | 申请日: | 2018-11-07 |
公开(公告)号: | CN109408501B | 公开(公告)日: | 2020-12-29 |
发明(设计)人: | 谢永恒;邹焱;万月亮 | 申请(专利权)人: | 北京锐安科技有限公司 |
主分类号: | G06F16/215 | 分类号: | G06F16/215;G06F16/29 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 |
地址: | 100044 北京市海淀区西小口*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 位置 数据 处理 方法 装置 服务器 存储 介质 | ||
本发明公开了一种位置数据的处理方法、装置、服务器及存储介质。该方法包括:获取当前位置数据,所述当前位置数据包括位置和时间戳;根据所述时间戳计算所述当前位置数据的数字标识;如果所述位置与数据库中历史位置数据的位置相同,并且所述数字标识与数据库中历史位置数据的数字标识相同,则将当前位置数据的时间戳覆盖历史位置数据的时间戳。通过上述技术方案,实现了以较低的数据量实时记录位置数据的变化,提高位置数据的处理效率。
技术领域
本发明实施例涉及大数据技术领域,尤其涉及一种位置数据的处理方法、装置、服务器及存储介质。
背景技术
在当今的移动互联网时代,智能手机、平板电脑等移动终端的应用越来越广泛,已经成为人们生活和工作中必不可少的通讯工具,为了全面管理移动终端的信息、保证移动终端的使用安全,需要通过基站采集移动终端的位置数据,对其进行定位或位置轨迹分析。通常情况下,基站与移动终端的交互在秒级,一个移动终端每天会产生大量的数据,需要占用很大的存储空间,并且很多数据都是重复的、无意义的。为此,需要对移动终端的位置数据进行压缩处理。
目前,对于移动终端位置数据的压缩处理方法为:使用Spark或MapReduce集群技术,将海量数据按照时间进行排序,将若干连续的基站和移动终端的数据合并为一条。此方法的实时性较差,需要积攒一定时间的数据才能进行去重或压缩处理,如果积攒时间太短,位置数据变化小,会导致处理后仍有许多重复或相近的数据;如果积攒时间太长,去重过程会执行很长时间,集群处理数据的压力大,并且会导致处理数据的时间延迟大,造成位置数据严重失真,无法跟踪到详细的位置轨迹。
发明内容
本发明提供了一种位置数据的处理方法、装置、服务器及存储介质,以实现以较低的数据量实时记录位置数据的变化,提高位置数据的处理效率。
第一方面,本发明实施例提供了一种位置数据的处理方法,包括:
获取当前位置数据,所述当前位置数据包括位置和时间戳;
根据所述时间戳计算所述当前位置数据的数字标识;
如果所述位置与数据库中历史位置数据的位置相同,且,所述数字标识与数据库中历史位置数据的数字标识相同,则将当前位置数据的时间戳覆盖历史位置数据的时间戳。
进一步的,还包括:
如果所述位置与数据库中历史位置数据的位置不相同,或者,所述数字标识与数据库中历史位置数据的数字标识不相同,则将当前位置数据和所述数字标识写入所述数据库。
进一步的,所述获取当前位置数据,包括:
实时采集位置数据并存储至消息中间件;
采用流式计算框架从所述消息中间件中读取所述当前位置数据。
进一步的,所述根据所述时间戳计算所述当前位置数据的数字标识,包括:
设定转换参数;
将所述时间戳转换为以秒为单位的数值,所述数值对所述转换参数取余,得到余数值;
根据所述数值与所述余数值的差值生成数字标识。
进一步的,所述历史位置数据以数据表的形式存储在数据库中,所述数据表以日期为单位建立,所述数据表的行键值为所述位置,所述数据表的列中存储了所述历史位置数据的数字标识和对应的时间戳。
进一步的,所述位置包括:基站ID和移动终端ID。
第二方面,本发明实施例提供了一种位置数据的处理装置,包括:
数据获取模块,用于获取当前位置数据,所述当前位置数据包括位置和时间戳;
标识生成模块,用于根据所述时间戳计算所述当前位置数据的数字标识;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京锐安科技有限公司,未经北京锐安科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811317436.8/2.html,转载请声明来源钻瓜专利网。
- 上一篇:人工智能运行平台
- 下一篇:一种数据标准处理方法、装置及其存储介质
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置