[发明专利]数据处理方法、装置及计算机可读存储介质

说明书

本发明公开了一种数据处理方法，包括以下步骤：获取第一轨迹数据及数据库中的数据字典表；基于所述数据字典表对所述第一轨迹数据进行筛选，以得到筛选后的第二轨迹数据；确定所述第二轨迹数据的数据类型，将所述第二轨迹数据按照所述数据类型分类存储。本发明还公开了一种数据处理装置及计算机可读存储介质。实现了采用数据字典表过滤掉不满足预设规则的轨迹数据，并根据数据类型对轨迹数据进行分类存储，减小了数据库压力，提高了数据处理效率。

技术领域

本发明涉及数据处理领域，尤其涉及一种数据处理方法、装置及计算机可读存储介质。

背景技术

近年来，GPS(Global Positioning System全球定位系统)技术快速发展，GPS相关的设备价格逐渐降低，并且定位精度逐渐提高。随之而来的是GPS设备的大量普及，现在大部分的智能手机上都配有GPS模块。GPS最基本的应用就是为人们提供定位的功能，但如果我们仅仅使用GPS来进行定位，那么我们将会失去大量有用的信息。我们采集的GPS信息中主要包含时间、位置这两方面的信息，将这些数据存储起来，通过对数据进行分析，我们将会得到更多的有用的信息。比如对某个城市在过去一周车流量进行分析，能够得出在某个时间，道路的拥挤程度，从而制定合适的出行路线。

目前，随着GPS轨迹数据越来越多，传统基于关系型数据库，能做到时效性，但无法支撑海量数据应用，并且对GPS轨迹数据进行存储时，数据存储混乱，有些无效数据也将存入数据库，造成数据库压力大、数据处理效率低。

上述内容仅用于辅助理解本发明的技术方案，并不代表承认上述内容是现有技术。

发明内容

本发明的主要目的在于提供一种数据处理方法、装置及计算机可读存储介质，旨在解决数据库压力大、数据处理效率低的技术问题。

为实现上述目的，本发明提供一种数据处理方法，所述方法包括以下步骤：

获取第一轨迹数据及数据库中的数据字典表；

基于所述数据字典表对所述第一轨迹数据进行筛选，以得到筛选后的第二轨迹数据；

确定所述第二轨迹数据的数据类型，将所述第二轨迹数据按照所述数据类型分类存储。

优选地，所述基于所述数据字典表对所述第一轨迹数据进行筛选，以得到筛选后的第二轨迹数据的步骤包括：

获取所述数据字典表中的第一预设规则，并确定所述第一轨迹数据是否满足所述第一预设规则；

获取满足所述第一预设规则的第二轨迹数据。

优选地，所述数据类型包括常规数据及热点数据，所述将所述第二轨迹数据按照所述数据类型分类存储的步骤包括：

将所述第二轨迹数据存储在数据库中；

确定所述第二轨迹数据是否为热点数据；

当所述第二轨迹数据为热点数据时，将所述第二轨迹数据存入缓存。

优选地，所述将所述第二轨迹数据存储在数据库中的步骤之后，所述数据处理方法还包括：

将所述第二轨迹数据按照第二预设规则进行分类排序；

提取所述第二轨迹数据中的预设字段作为一级索引。

优选地，所述确定所述第二轨迹数据是否为热点数据的步骤之后，所述数据处理方法还包括：

当所述第二轨迹数据不是热点数据时，建立二级索引；

将所述二级索引对应的索引数据存储至搜索服务器。

优选地，所述当所述第二轨迹数据为热点数据时，将所述第二轨迹数据存入缓存的步骤之后，所述数据处理方法还包括：