航迹存储与检索方法、系统、设备及计算机存储可读介质技术方案

本发明专利技术提供了一种航迹存储与检索方法，包括如下步骤：步骤S1：数据采集端通过数据采集器收集航迹数据；步骤S2：通过分布式日志接收服务把航迹数据接入到分布式数据总线中；步骤S3：分布式数据总线通过分区管理数据，分布式数据总线通过消费者组和偏移量记录大数据计算引擎使用数据的情况；步骤S4：通过大数据计算引擎读取分布式数据总线中的数据进行数据融合并统一数据记录目标；步骤S5：融合并统一后的数据存储到分布式搜索引擎中；步骤S6：将存储到分布式搜索引擎的数据通过时间及空间叠加过滤，并且自定义数据精度获取详细航迹及抽样航迹。本发明专利技术基于时间空间叠加的航迹过滤算法，可以自定义航迹精度，能做到毫秒级检索历史航迹数据。

【技术实现步骤摘要】
航迹存储与检索方法、系统、设备及计算机存储可读介质
本专利技术涉及航迹存储与检索
，具体地，涉及一种航迹存储与检索方法、系统、设备及计算机存储可读介质。
技术介绍
我国有着丰富的河流和沿海，是传统的渔业大国，然而随着我国经济的飞速发展，我国水资源面临诸多问题，如捕捞能力过剩，渔业资源衰退严重，经济鱼类资源接近枯竭，为此国家出台一系列禁渔，渔业保护区政策，但是我国渔业，水系现代化信息化相对还不完善。各种走私，偷沙，偷鱼等活动猖獗。现在大型港口，重点江河领域都安装了雷达，政府也对AIS数据加强管理，通过这些数据可对各种船舶做有效监管，但是这些设备产生了海量的时空航迹数据，这就给传统的数据库处理方式带来了巨大挑战，随着我国渔业，水系现代化信息化的高速发展，对这些海量时空航迹数据高效处理成为亟待解决的问题。AIS数据系统是船舶自动识别系统(AutomaticIdentificationSystem)的简称，由岸基(基站)设施和船载设备共同组成是一种船舶定位技术，通过低轨道的卫星接收船舶发送的AIS报文信息，卫星将接收和解码AIS报文信息转本文档来自技高网...

【技术保护点】
1.一种航迹存储与检索方法，其特征在于，包括如下步骤：/n步骤S1：数据采集端通过数据采集器收集航迹数据；/n步骤S2：通过分布式日志接收服务把航迹数据接入到分布式数据总线中；/n步骤S3：分布式数据总线通过分区管理数据，分布式数据总线通过消费者组和偏移量记录大数据计算引擎使用数据的情况；/n步骤S4：通过大数据计算引擎读取分布式数据总线中的数据进行数据融合并统一数据记录目标；/n步骤S5：融合并统一后的数据存储到分布式搜索引擎中；/n步骤S6：将存储到分布式搜索引擎的数据通过时间及空间叠加过滤，并且自定义数据精度获取详细航迹及抽样航迹。/n

【技术特征摘要】
1.一种航迹存储与检索方法，其特征在于，包括如下步骤：
步骤S1：数据采集端通过数据采集器收集航迹数据；
步骤S2：通过分布式日志接收服务把航迹数据接入到分布式数据总线中；
步骤S3：分布式数据总线通过分区管理数据，分布式数据总线通过消费者组和偏移量记录大数据计算引擎使用数据的情况；
步骤S4：通过大数据计算引擎读取分布式数据总线中的数据进行数据融合并统一数据记录目标；
步骤S5：融合并统一后的数据存储到分布式搜索引擎中；
步骤S6：将存储到分布式搜索引擎的数据通过时间及空间叠加过滤，并且自定义数据精度获取详细航迹及抽样航迹。


2.根据权利要求1所述的航迹存储与检索方法，其特征在于，所述步骤S1中是通过雷达控制器和AIS设备对航迹数据进行收集。


3.根据权利要求1所述的航迹存储与检索方法，其特征在于，所述步骤S2中的分布式日志接收服务包括：
分布式接收服务：通过部署多台不同接收服务来接收不同数据采集器采集的航迹数据，并由总控服务器控制数据接收状况；
分布式译码服务：利用不同接收服务的配置对采集的航迹数据进行译码，转化成可识别字符数据；
分布式传输服务：将可识别字符数据发送到分布式数据总线。


4.根据权利要求1所述的航迹存储与检索方法，其特征在于，所述步骤S3中的分布式数据总线通过主题和分区存储航迹数据，同一个主题的航迹数据存储在不同分区里，每个分区包括主分区和备分区，主分区和备分区分布在不同的节点上。


5.根据权利要求1所述的航迹存储与检索方法，其特征在于，所述步骤S4中通过大数据计算引擎读取分布式数据总线的数据进行数据融合，把同一目标及同一时刻的不同数据融合成统一的航迹记录。


6.根据权利要求1所述的航迹存储与检索方法，其特征在于，所述步骤S5中将融合并统一后的数据存储到分布式搜索引擎中，每个计算周期的数据作为一个索引，每个索引包括主分片和备分片，将数据存储到不同分片...

【专利技术属性】
技术研发人员：林德银，孙林，王林，
申请(专利权)人：上海鹰觉科技有限公司，安徽鹰觉科技有限公司，
类型：发明
国别省市：上海;31