一种车辆数据处理方法、终端及计算机存储介质技术

技术编号:32969010 阅读:21 留言:0更新日期:2022-04-09 11:30
本申请涉及一种车辆数据处理方法、终端及计算机存储介质。本申请提供的处理方法,包括:获取车辆的原始数据包及所述原始数据包的元数据;根据所述元数据,从所述原始数据包中获取消息数据;根据所述消息数据,获取目标数据。本申请提供的车辆数据处理方法、终端及计算机存储介质,能够在数据服务读取数据时,减少数据传输量及传输时间,避免频繁的反序列化解析操作,提高车辆数据的存储、处理及使用效率。处理及使用效率。处理及使用效率。

【技术实现步骤摘要】
一种车辆数据处理方法、终端及计算机存储介质


[0001]本申请属于车辆通信
,尤其涉及一种车辆数据处理方法、终端及计算机存储介质。

技术介绍

[0002]数据仓库诞生自上个世纪90年代,主要解决的是传统关系型数据库技术无法满足业务数据量爆炸性增长的问题。数据仓库采用特有的分布式存储架构,结合分布式计算框架,能满足用户从海量数据中分析挖掘有价值的信息,做出正确的决策。随着自动驾驶技术的蓬勃发展,自动驾驶数据的积累量越来越多,自动驾驶模型和仿真对数据驱动的依赖越来越强,如何高效存储、处理和使用车辆数据成了一个非常重要的技术难题。从数据结构看,车辆数据既包括结构化数据,如传感器信息,又包括非结构化数据,如摄像头图像;从数据体量看,车辆数据的单个文件大小达GB级,数量可多达百万级别,总存储量在几十甚至几百PB级别。这些场景特征都对数据仓库技术提出了新的要求。
[0003]当前自动驾驶的数据仓库,主要是围绕采集的原始数据包展开。车辆在道路上行驶时,将多个传感器采集的原始信号数据以ROS bag文件格式记录和输出;原始数据包通过上盘进入数据仓本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种车辆数据处理方法,其特征在于,所述处理方法,包括:获取车辆的原始数据包及所述原始数据包的元数据;根据所述元数据,从所述原始数据包中获取消息数据;根据所述消息数据,获取目标数据。2.如权利要求1所述的处理方法,其特征在于,获取所述原始数据包的元数据,包括:根据所述原始数据包的存储格式定义,读取所述原始数据包的所述元数据;其中,所述元数据包括版本信息、头文件、连接信息、块信息。3.如权利要求2所述的处理方法,其特征在于,在所述获取所述原始数据包的元数据的步骤之后,包括:将所述元数据以第一预设格式存储在数据仓库的元数据存储区。4.如权利要求2所述的处理方法,其特征在于,所述连接信息包括连接名称、连接类型、消息名称、消息定义;所述块信息包括块起止位置、所述连接名称、所述消息名称、消息起止位置。5.如权利要求4所述的处理方法,其特征在于,所述根据所述元数据,从所述原始数据包中获取消息数据的步骤,包括:根据所述消息名称,对所述原始数据包中的消息进行分类;通过递归的方法动态解析各类型消息的消息定义的字符串,构建所述各类型消息的对象,其中,所述各类型消息的对象包括所述各类型消息的嵌套结构及所述各类型消息的解析方法;根据所述各类型消息的块起止位置及消息起止位置,获取所述各类型消息的消息片段;调用对应的解析方法,对所述各类型消息的消息片段进行反序列化得到所述各类型消息的...

【专利技术属性】
技术研发人员:王之洋
申请(专利权)人:武汉路特斯汽车有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1