[发明专利]一种基于大数据的生鲜农产品统计方法、系统及终端

说明书

本发明属于互联网技术领域，具体涉及一种基于大数据的生鲜农产品统计方法、系统及终端，所述方法包括以下步骤：获取高速公路上绿色通道生鲜农产品的过站数据；对过站数据进行清洗处理，得到格式规整的预处理数据；根据预处理数据和收费站地理信息库，从多个维度对生鲜农产品的货运流向数据进行分析统计并得到统计结果；根据统计结果生成对应的可视化图表并展示可视化图表。本发明对生鲜农产品通过出/入站口收费站的过站数据进行分析统计，从而得到全国范围内生鲜农产品的货运流向数据，从而为监管部门和商家用户的决策提供依据和参考。

技术领域

本发明属于互联网技术领域，具体涉及一种基于大数据的生鲜农产品统计方法、系统及终端。

背景技术

生鲜农产品主要包括蔬菜、水果、禽、蛋、水产品、肉、奶制品等。生鲜农产品是中国消费者主要的食物来源，它在日常生活消费中扮演着极为重要的角色。

我国幅员辽阔，拥有13亿人口，是农产品的生产与消费大国。2012～2016年，我国生鲜农产品产量由11.6亿吨增加至12.81亿吨；肉类总产量由8387万吨增加到8540万吨；水产品总产量由5908万吨增加到6900万吨。我国粮食、油料、蔬菜、水果、肉类、禽蛋和水产品等产量连续多年居世界第一。

2015年，中国亿元以上生鲜农产品交易市场数量为569个；2016年，中国亿元以上生鲜农产品交易市场数量为571个。现有生鲜农产品的销售数量和交易市场逐渐增多，生鲜农产品市场的竞争也越来越激烈。现有市场上，一般通过人工结合电脑的方式，对生鲜农产品的货运流向和运输数据进行分析统计，自动化程度低，统计不准确，需要花费大量的人力成本和时间成本。

发明内容

针对现有技术中的缺陷，本发明提供了一种基于大数据的生鲜农产品统计方法、系统及终端，对生鲜农产品通过出/入站口收费站的过站数据进行分析统计，从而得到全国范围内生鲜农产品的货运流向数据，从而为监管部门和商家用户的决策提供依据和参考。

第一方面，本发明提供了一种基于大数据的生鲜农产品统计方法，包括以下步骤：

获取高速公路上绿色通道生鲜农产品的过站数据；

对过站数据进行清洗处理，得到格式规整的预处理数据；

根据预处理数据和收费站地理信息库，从多个维度对生鲜农产品的货运流向数据进行分析统计并得到统计结果；

根据统计结果生成对应的可视化图表并展示可视化图表。

优选地，所述过站数据包括货车车牌号、货物名称、货物数量、出/入站口收费站名称和通关时间。

优选地，所述对过站数据进行清洗处理，得到格式规整的预处理数据，具体为：

通过hadoop分布式集群获取过站数据，并将过站数据分布式存储于Hadoop HDFS；

通过Hadoop MapReduce对过站数据进行清洗和计算，去除无效数据，得到统计所需的规整的预处理数据，并将预处理数据存储于Hadoop HDFS。

优选地，所述多个维度包括时间维度、地理维度、货物维度和货车维度；

所述统计结果包括数据量驾驶舱统计结果、全国数据驾驶舱统计结果、综合分析驾驶舱统计结果、地域数据驾驶舱统计结果、货物数据驾驶舱统计结果、货车数据驾驶舱统计结果和收费站数据驾驶舱统计结果；每种驾驶舱统计结果包括多种统计项目。

优选地，还包括将各数据库进行关联的步骤，具体为：将Hadoop HDFS中的各个数据库，通过相应的字段进行关联；

所述数据库包括货物运输库、货车信息库、收费站信息库和收费站地理信息库；

所述货物运输库包括货物id、货物类型、货物名称、货物简称、货物吨数和通关时间；