一种移动位置数据的管理方法、装置、存储介质及终端制造方法及图纸

技术编号:25996535 阅读:29 留言:0更新日期:2020-10-20 19:06
本发明专利技术公开了一种对移动位置的数据管理方法、装置、存储介质及终端,所述方法包括:接收移动位置数据;将所述移动位置数据进行空间属性标记,生成标记后的移动位置数据;将所述标记后的移动位置数据按照所述标记后的移动位置数据对应的空间属性缓存至预先初始化的空间分区中,生成缓存后的移动位置数据;对所述缓存后的移动位置数据构建移动位置数据索引,生成构建索引后的移动位置数据;将所述构建索引后的移动位置数据进行保存,生成文件;按照预设数据需求,对所述构建索引后的移动位置数据进行实时分发或者对所述文件中的历史移动位置数据进行分发。因此,采用本申请实施例,可以提高数据管理效率,降低数据丢失的概率,适用于海量移动位置数据的管理。

【技术实现步骤摘要】
一种移动位置数据的管理方法、装置、存储介质及终端
本专利技术涉及计算机
,特别涉及一种对移动位置数据的管理方法、装置、存储介质及终端。
技术介绍
随着移动互联网的发展,中国的移动互联网用户已达到11亿之多,产生的移动位置数据开始大量增加,区别于传统的商用车辆的移动位置数据,这些数据上传频率高,产生了数以万亿字节计的移动位数数据,围绕海量移动位置数据进行进一步挖掘,能够为社会效率提升及城市管理等方面提供重要的数据支撑与决策依据。针对海量移动位置数据的管理,目前采用消息队列进行接收,通过Hadoop等大数据平台进行数据的存储与分发管理,虽然这样的方法通过分布式的方式保证了接收数据不丢失、却需要更多服务器资源来应对庞大的数据量,而且当历史移动位置数据保存成文件时,只能划分时间段进行存储,单个文件巨大,受到计算机IO的限制,从而导致数据写入磁盘延迟高,增加了数据丢失的概率,并且不能高效的应对不同的数据分发需求。
技术实现思路
本申请实施例提供了一种对移动位置数据的管理方法、装置、存储介质及终端。为了对披露的实施例的一些方面有一个基本的理解,下面给出了简单的概括。该概括部分不是泛泛评述,也不是要确定关键/重要组成元素或描绘这些实施例的保护范围。其唯一目的是用简单的形式呈现一些概念,以此作为后面的详细说明的序言。第一方面,本申请实施例提供了一种一种对移动位置数据的管理方法,所述方法包括:接收移动位置数据;将所述移动位置数据进行空间属性标记,生成标记后的移动位置数据;>将所述标记后的移动位置数据按照所述标记后的移动位置数据对应的空间属性缓存至预先初始化的空间分区中,生成缓存后的移动位置数据;对所述缓存后的移动位置数据构建移动位置数据索引,生成构建索引后的移动位置数据;将所述构建索引后的移动位置数据进行保存,生成文件;按照预设数据需求,对所述构建索引后的移动位置数据进行实时分发或者对所述文件中的历史移动位置数据进行分发。可选的,所述接收移动位置数据之前,还包括:通过四叉树的方式划分空间的基础分区;创建用户分区;将所述基础分区和用户分区确定为预先初始化的空间分区。可选的,所述按照预设数据需求,对所述构建索引后的移动位置数据进行实时分发或者对所述文件中的历史移动位置数据进行分发,包括:当分发的移动位置数据为实时数据分发时,获取所述移动位置数据对应的空间属性;基于所述空间属性获取所述缓存后的移动位置数据;将所述移动位置数据进行转发。可选的,所述按照预设数据需求,对所述构建索引后的移动位置数据进行实时分发或者对所述文件中的历史移动位置数据进行分发,包括:当分发的移动位置数据为历史数据分发时,获取所述移动位置数据对应的空间属性;基于所述空间属性获取所述文件中的移动位置数据;将所述移动位置数据进行转发。可选的,所述预先初始化的空间分区按照分区内数据量对所述预先初始化的空间分区进行动态拆分与合并。第二方面,本申请实施例提供了一种对移动位置的数据管理装置,所述装置包括:数据接收模块,用于接收移动位置数据;第一数据生成模块,用于将所述移动位置数据进行空间属性标记,生成标记后的移动位置数据;第二数据生成模块,用于将所述标记后的移动位置数据按照所述标记后的移动位置数据对应的空间属性缓存至预先初始化的空间分区中,生成缓存后的移动位置数据;第三数据生成模块,用于对所述缓存后的移动位置数据构建移动位置数据索引,生成构建索引后的移动位置数据;文件生成模块,用于将所述构建索引后的移动位置数据进行保存,生成文件;数据分发模块,用于按照预设数据需求,对所述构建索引后的移动位置数据进行实时分发或者对所述文件中的历史移动位置数据进行分发。第三方面,本申请实施例提供一种计算机存储介质,所述计算机存储介质存储有多条指令,所述指令适于由处理器加载并执行上述的方法步骤。第四方面,本申请实施例提供一种终端,可包括:处理器和存储器;其中,所述存储器存储有计算机程序,所述计算机程序适于由所述处理器加载并执行上述的方法步骤。本申请实施例提供的技术方案可以包括以下有益效果:在本申请实施例中,用户终端首先接收移动位置数据,再将所述移动位置数据进行空间属性标记,生成标记后的移动位置数据,然后将所述标记后的移动位置数据按照所述标记后的移动位置数据对应的空间属性缓存至预先初始化的空间分区中,生成缓存后的移动位置数据,再对所述缓存后的移动位置数据构建移动位置数据索引,生成构建索引后的移动位置数据,最后将所述构建索引后的移动位置数据进行保存,生成文件,按照预设数据需求,对所述构建索引后的移动位置数据进行实时分发或者对所述文件中的历史移动位置数据进行分发。由于本申请通过挖掘移动位置数据的特征,减少了数据冗余,通过对空间的动态分区,保证了分区内数据量的均衡性,然后将移动位置数据按照数据的空间属性存储到相应的分区,在分区内对移动位置数据构建动态索引,实现了移动位置数据的快速访问,在存储数据到磁盘时,将分区和分区索引存储到磁盘上,实现了离线数据的快速存储与访问。从而能够快速响应数据使用需求,高效提取指定时空范围内的移动位置数据,并且解决了海量移动位置数据存储时单个文件巨大,写入延迟高的问题。应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本专利技术。附图说明此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本专利技术的实施例,并与说明书一起用于解释本专利技术的原理。图1是本申请实施例提供的一种移动位置数据的管理方法的流程示意图;图2是本申请实施例提供的另一种移动位置数据的管理方法的流程示意图;图3是本申请实施例提供的一种移动位置数据的管理方法的系统流程图;图4是本申请实施例提供的一种移动位置数据的管理方法的空间预处理模块的流程框图;图5是本申请实施例提供的一种移动位置数据的管理方法的数据接收模块的流程框图;图6是本申请实施例提供的一种移动位置数据的管理方法的数据缓存模块的流程框图;图7是本申请实施例提供的一种移动位置数据的管理方法的数据保存模块的流程框图;图8是本申请实施例提供的一种移动位置数据的管理方法的数据分发模块的流程框图;图9是本申请实施例提供的一种移动位置数据的管理装置的结构示意图;图10是本申请实施例提供的另一种移动位置数据的管理装置的结构示意图;图11是本申请实施例提供的一种终端的结构示意图。具体实施方式以下描述和附图充分地示出本专利技术的具体实施方案,以使本领域的技术人员能够实践它们。应当明确,所描述的实施例仅仅是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本专利技术保护的范围。下面的描述涉本文档来自技高网...

【技术保护点】
1.一种对移动位置的数据管理方法,其特征在于,所述方法包括:/n接收移动位置数据;/n将所述移动位置数据进行空间属性标记,生成标记后的移动位置数据;/n将所述标记后的移动位置数据按照所述标记后的移动位置数据对应的空间属性缓存至预先初始化的空间分区中,生成缓存后的移动位置数据;/n对所述缓存后的移动位置数据构建移动位置数据索引,生成构建索引后的移动位置数据;/n将所述构建索引后的移动位置数据进行保存,生成文件;/n按照预设数据需求,对所述构建索引后的移动位置数据进行实时分发或者对所述文件中的历史移动位置数据进行分发。/n

【技术特征摘要】
1.一种对移动位置的数据管理方法,其特征在于,所述方法包括:
接收移动位置数据;
将所述移动位置数据进行空间属性标记,生成标记后的移动位置数据;
将所述标记后的移动位置数据按照所述标记后的移动位置数据对应的空间属性缓存至预先初始化的空间分区中,生成缓存后的移动位置数据;
对所述缓存后的移动位置数据构建移动位置数据索引,生成构建索引后的移动位置数据;
将所述构建索引后的移动位置数据进行保存,生成文件;
按照预设数据需求,对所述构建索引后的移动位置数据进行实时分发或者对所述文件中的历史移动位置数据进行分发。


2.根据权利要求1所述的方法,其特征在于,所述接收移动位置数据之前,还包括:
通过四叉树的方式划分空间的基础分区;
创建用户分区;
将所述基础分区和用户分区确定为预先初始化的空间分区。


3.根据权利要求1所述的方法,其特征在于,所述按照预设数据需求,对所述构建索引后的移动位置数据进行实时分发或者对所述文件中的历史移动位置数据进行分发,包括:
当分发的移动位置数据为实时数据分发时,获取所述移动位置数据对应的空间属性;
基于所述空间属性获取所述缓存后的移动位置数据;
将所述移动位置数据进行转发。


4.根据权利要求3所述的方法,其特征在于,所述按照预设数据需求,对所述构建索引后的移动位置数据进行实时分发或者对所述文件中的历史移动位置数据进行分发,包括:
当分发的移动位置数...

【专利技术属性】
技术研发人员:韩兴广聂巧伟郭胜敏夏曙东
申请(专利权)人:北京掌行通信息技术有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1