一种基于大数据的生鲜农产品统计方法、系统及终端技术方案

本发明专利技术属于互联网技术领域，具体涉及一种基于大数据的生鲜农产品统计方法、系统及终端，所述方法包括以下步骤：获取高速公路上绿色通道生鲜农产品的过站数据；对过站数据进行清洗处理，得到格式规整的预处理数据；根据预处理数据和收费站地理信息库，从多个维度对生鲜农产品的货运流向数据进行分析统计并得到统计结果；根据统计结果生成对应的可视化图表并展示可视化图表。本发明专利技术对生鲜农产品通过出/入站口收费站的过站数据进行分析统计，从而得到全国范围内生鲜农产品的货运流向数据，从而为监管部门和商家用户的决策提供依据和参考。

A Statistical Method, System and Terminal of Fresh Agricultural Products Based on Big Data

The invention belongs to the field of Internet technology, and specifically relates to a statistical method, system and terminal of fresh agricultural products based on large data. The method comprises the following steps: acquiring the outbound data of green channel fresh agricultural products on expressway; cleaning the outbound data to obtain the pre-processed data with regular format; and according to the pre-processed data and the geographic information database of toll station, Freight flow data of fresh agricultural products are analyzed and counted from multiple dimensions, and the statistical results are obtained. According to the statistical results, corresponding visual charts are generated and displayed. The invention analyses and counts the outbound data of fresh agricultural products through the toll station at the exit/entry port, thereby obtaining the freight flow data of fresh agricultural products nationwide, thus providing the basis and reference for the decision-making of the supervisory department and commercial users.

【技术实现步骤摘要】
一种基于大数据的生鲜农产品统计方法、系统及终端
本专利技术属于互联网
，具体涉及一种基于大数据的生鲜农产品统计方法、系统及终端。
技术介绍
生鲜农产品主要包括蔬菜、水果、禽、蛋、水产品、肉、奶制品等。生鲜农产品是中国消费者主要的食物来源，它在日常生活消费中扮演着极为重要的角色。我国幅员辽阔，拥有13亿人口，是农产品的生产与消费大国。2012～2016年，我国生鲜农产品产量由11.6亿吨增加至12.81亿吨；肉类总产量由8387万吨增加到8540万吨；水产品总产量由5908万吨增加到6900万吨。我国粮食、油料、蔬菜、水果、肉类、禽蛋和水产品等产量连续多年居世界第一。2015年，中国亿元以上生鲜农产品交易市场数量为569个；2016年，中国亿元以上生鲜农产品交易市场数量为571个。现有生鲜农产品的销售数量和交易市场逐渐增多，生鲜农产品市场的竞争也越来越激烈。现有市场上，一般通过人工结合电脑的方式，对生鲜农产品的货运流向和运输数据进行分析统计，自动化程度低，统计不准确，需要花费大量的人力成本和时间成本。
技术实现思路
针对现有技术中的缺陷，本专利技术提供了一种基于大数据的生鲜农产品统计方法、系统及终端，对生鲜农产品通过出/入站口收费站的过站数据进行分析统计，从而得到全国范围内生鲜农产品的货运流向数据，从而为监管部门和商家用户的决策提供依据和参考。第一方面，本专利技术提供了一种基于大数据的生鲜农产品统计方法，包括以下步骤：获取高速公路上绿色通道生鲜农产品的过站数据；对过站数据进行清洗处理，得到格式规整的预处理数据；根据预处理数据和收费站地理信息库，从多个维度对生鲜农产品的货运流向数据进行分析统计并得到统计结果；根据统计结果生成对应的可视化图表并展示可视化图表。优选地，所述过站数据包括货车车牌号、货物名称、货物数量、出/入站口收费站名称和通关时间。优选地，所述对过站数据进行清洗处理，得到格式规整的预处理数据，具体为：通过hadoop分布式集群获取过站数据，并将过站数据分布式存储于HadoopHDFS；通过HadoopMapReduce对过站数据进行清洗和计算，去除无效数据，得到统计所需的规整的预处理数据，并将预处理数据存储于HadoopHDFS。优选地，所述多个维度包括时间维度、地理维度、货物维度和货车维度；所述统计结果包括数据量驾驶舱统计结果、全国数据驾驶舱统计结果、综合分析驾驶舱统计结果、地域数据驾驶舱统计结果、货物数据驾驶舱统计结果、货车数据驾驶舱统计结果和收费站数据驾驶舱统计结果；每种驾驶舱统计结果包括多种统计项目。优选地，还包括将各数据库进行关联的步骤，具体为：将HadoopHDFS中的各个数据库，通过相应的字段进行关联；所述数据库包括货物运输库、货车信息库、收费站信息库和收费站地理信息库；所述货物运输库包括货物id、货物类型、货物名称、货物简称、货物吨数和通关时间；所述货车信息库包括货车id、货车车轴、货车车牌号、车牌号简称、车牌归属省份和车牌归属城市；所述收费站信息库包括收费站id、出站口收费站名称和入站口收费站名称；所述收费站地理信息库包括收费站id、出站口收费站所在省份、出站口收费站所在城市、出站口收费站所在区县、出站口收费站经度、出站口收费站纬度、入站口收费站所在省份、入站口收费站所在城市、入站口收费站所在区县、入站口收费站经度和入站口收费站纬度。优选地，还包括通过搜索进行统计的步骤，具体为：获取用户的搜索条件，根据搜索条件查询预处理数据，结合收费站地理信息库，从多个维度对生鲜农产品的货运流向数据进行分析统计并得到统计结果。优选地，还包括与其他平台进行对接的步骤，具体为：将本平台与货运管理平台和收费管理平台进行对接，并从对接的平台上获取所需的数据。优选地，还包括用户管理的步骤，具体为：对用户的注册访问信息进行管理，根据用户身份对用户授予对应的用户权限，根据用户权限对用户的访问请求进行控制。第二方面，本专利技术提供了一种基于大数据的生鲜农产品统计系统，适用于第一方面所述的基于大数据的生鲜农产品统计方法，包括：数据获取单元，用于获取高速公路上绿色通道生鲜农产品的过站数据；数据清洗单元，用于对过站数据进行清洗处理，得到格式规整的预处理数据；分析统计单元，用于根据预处理数据和收费站地理信息库，从多个维度对生鲜农产品的货运流向数据进行分析统计并得到统计结果；图表展示单元，用于根据统计结果生成对应的可视化图表并展示可视化图表。第三方面，本专利技术提供了一种计算机终端，包括处理器和与处理器连接的存储器，所述存储器用于存储计算机程序，所述计算机程序包括程序指令，其特征在于，所述处理器被配置用于调用所述程序指令，执行第一方面所述的方法。本专利技术实施例，对生鲜农产品通过出/入站口收费站的过站数据进行分析统计，从而得到全国范围内生鲜农产品的货运流向数据，从而为监管部门和商家用户的决策提供依据和参考。附图说明为了更清楚地说明本专利技术具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍。在所有附图中，类似的元件或部分一般由类似的附图标记标识。附图中，各元件或部分并不一定按照实际的比例绘制。图1为本专利技术实施例中基于大数据的生鲜农产品统计方法的流程图；图2为本专利技术实施例中基于大数据的生鲜农产品统计系统的结构示意图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。还应当理解，在此本专利技术说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本专利技术。如在本专利技术说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。还应当进一步理解，在本专利技术说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。具体实现中，本专利技术实施例中描述的终端包括但不限于诸如具有触摸敏感表面(例如，触摸屏显示器和/或触摸板)的移动电话、膝上型计算机或平板计算机之类的其它便携式设备。还应当理解的是，在某些实施例中，所述设备并非便携式通信设备，而是具有触摸敏感表面(例如，触摸屏显示器和/或触摸板)的台式计算机。实施例一：本实施例提供了一种基于大数据的生鲜农产品统计方法，如图1所示，包括以下步骤：S1，获取高速公路上绿色通道生鲜农产品的过站数据；S2，对过站数据进行清洗处理，得到格式规整的预处理数据；S3，根据预处理数据和收费站地理信息库，从多个维度对生鲜农产品的货运流向数据进行分析统计并得到统计结果；S4，根据统计结果生成对应的可视化图表并展示可视化图表。本实施例中，装有生鲜农产品的货车从高速公路的收费站的绿色通道通过，收费站即可采集生鲜农产品的过站数据，本文档来自技高网...

【技术保护点】
1.一种基于大数据的生鲜农产品统计方法，其特征在于，包括以下步骤：获取高速公路上绿色通道生鲜农产品的过站数据；对过站数据进行清洗处理，得到格式规整的预处理数据；根据预处理数据和收费站地理信息库，从多个维度对生鲜农产品的货运流向数据进行分析统计并得到统计结果；根据统计结果生成对应的可视化图表并展示可视化图表。

【技术特征摘要】
1.一种基于大数据的生鲜农产品统计方法，其特征在于，包括以下步骤：获取高速公路上绿色通道生鲜农产品的过站数据；对过站数据进行清洗处理，得到格式规整的预处理数据；根据预处理数据和收费站地理信息库，从多个维度对生鲜农产品的货运流向数据进行分析统计并得到统计结果；根据统计结果生成对应的可视化图表并展示可视化图表。2.根据权利要求1所述的一种基于大数据的生鲜农产品统计方法，其特征在于，所述过站数据包括货车车牌号、货物名称、货物数量、出/入站口收费站名称和通关时间。3.根据权利要求2所述的一种基于大数据的生鲜农产品统计方法，其特征在于，所述对过站数据进行清洗处理，得到格式规整的预处理数据，具体为：通过hadoop分布式集群获取过站数据，并将过站数据分布式存储于HadoopHDFS；通过HadoopMapReduce对过站数据进行清洗和计算，去除无效数据，得到统计所需的规整的预处理数据，并将预处理数据存储于HadoopHDFS。4.根据权利要求3所述的一种基于大数据的生鲜农产品统计方法，其特征在于，所述多个维度包括时间维度、地理维度、货物维度和货车维度；所述统计结果包括数据量驾驶舱统计结果、全国数据驾驶舱统计结果、综合分析驾驶舱统计结果、地域数据驾驶舱统计结果、货物数据驾驶舱统计结果、货车数据驾驶舱统计结果和收费站数据驾驶舱统计结果；每种驾驶舱统计结果包括多种统计项目。5.根据权利要求1所述的一种基于大数据的生鲜农产品统计方法，其特征在于，还包括将各数据库进行关联的步骤，具体为：将HadoopHDFS中的各个数据库，通过相应的字段进行关联；所述数据库包括货物运输库、货车信息库、收费站信息库和收费站地理信息库；所述货物运输库包括货物id、货物类型、货物名称、货物简称、货物吨数和通关时间；所述货车信息库包括货车id、货车车轴、货车车牌号、车牌号简称、车牌归属省份和车牌归属...

【专利技术属性】
技术研发人员：陈昕，
申请(专利权)人：昆明黑马软件股份有限公司，
类型：发明
国别省市：云南,53