本发明专利技术提供了一种数据处理方法,涉及计算机的技术领域,包括:获取目标车辆配置的传感器组的传感器参数;根据传感器参数计算目标车辆的传输存储需求;其中,传输存储需求包括传输速率需求和存储内存需求;根据传输存储需求分别从候选传输设备标识中确定目标传输设备标识,以及从候选存储设备标识中确定目标存储设备标识,以通过目标传输设备标识对应的数据传输设备,将传感器组采集的环境数据传输至目标存储设备标识对应的数据存储设备进行存储。本发明专利技术可以显著提升数据传输存储速率,还可以避免存储环境数据时出现区域限制问题,从而较好地满足数据量较大时的数据传输存储需求。好地满足数据量较大时的数据传输存储需求。好地满足数据量较大时的数据传输存储需求。
【技术实现步骤摘要】
数据处理方法、装置及服务器
[0001]本专利技术涉及计算机
,尤其是涉及一种数据处理方法、装置及服务器。
技术介绍
[0002]为解决自动驾驶工程中数据分布“长尾问题”,通常将自动驾驶和数据闭环结合在一起,其中,自动驾驶场景数据规模和采集能力影响自动驾驶能力的发展速度。在实际应用中,由于现实世界中具有无限丰富、极其复杂、不可预测、不可穷尽等特点,因此可以通过传感器采集现实世界中的数据用于自动驾驶工程。相关技术提出,可以利用云服务器对采集的数据进行传输和存储:对于数据传输过程,为了更加精确的还原真实场景,需要布置尽可能多的传感器以减小甚至消除盲区,导致待传输的数据量较大,致使云服务器的传输速率无法较好地满足数据传输需求;对于数据存储过程,云服务器存储数据时存在区域限制问题,导致云服务器无法叫好地满足数据存储需求。
技术实现思路
[0003]有鉴于此,本专利技术的目的在于提供一种数据处理方法、装置及服务器,可以显著提升数据传输存储速率,还可以避免存储环境数据时出现区域限制问题,从而较好地满足数据量较大时的数据传输存储需求。
[0004]第一方面,本专利技术实施例提供了一种数据处理方法,方法应用于服务器,服务器配置有多个候选传输设备标识和候选存储设备标识,方法包括:
[0005]获取目标车辆配置的传感器组的传感器参数;
[0006]根据传感器参数计算目标车辆的传输存储需求;其中,传输存储需求包括传输速率需求和存储内存需求;
[0007]根据传输存储需求分别从候选传输设备标识中确定目标传输设备标识,以及从候选存储设备标识中确定目标存储设备标识,以通过目标传输设备标识对应的数据传输设备,将传感器组采集的环境数据传输至目标存储设备标识对应的数据存储设备进行存储。
[0008]在一种实施方式中,传感器组包括多个图像采集设备;根据传感器参数计算目标车辆的传输存储需求的步骤,包括:
[0009]根据传感器参数计算传感器组中每个图像采集设备对应的单帧图像占用内存;其中,传感器参数包括图像尺寸、图像编码规则和采样帧率;
[0010]根据图像采集设备的设备数量和单帧图像占用内存计算目标车辆的传输速率需求。
[0011]在一种实施方式中,根据传感器参数计算传感器组中每个图像采集设备对应的单帧图像占用内存的步骤,包括:
[0012]根据图像编码规则确定单像素点占用内存;
[0013]计算单像素点内存与图像尺寸的乘积,得到传感器组中每个图像采集设备对应的单帧图像占用内存。
[0014]在一种实施方式中,根据图像采集设备的设备数量和单帧图像占用内存计算目标车辆的传输速率需求的步骤,包括:
[0015]计算图像采样设备的设备数量、单帧图像占用内存和采样帧率的乘积,得到目标车辆的传输速率需求。
[0016]在一种实施方式中,根据传感器参数计算目标车辆的传输存储需求的步骤,还包括:
[0017]根据传输速率需求和预设采集周期计算目标车辆的存储内存需求。
[0018]在一种实施方式中,数据存储设备包括磁盘阵列;
[0019]从候选存储设备标识中确定目标存储设备标识的步骤,包括:
[0020]获取预先设置的多个候选磁盘阵列级别;其中,候选磁盘阵列级别用于表征磁盘阵列中所包含的磁盘数量和磁盘性能描述;
[0021]根据存储内存需求从候选磁盘阵列级别中确定目标磁盘阵列级别;
[0022]基于目标磁盘阵列级别从候选存储设备标识中确定目标存储设备标识。
[0023]在一种实施方式中,目标存储设备标识对应的磁盘阵列包括至少一个主磁盘,或,目标存储设备标识对应的磁盘阵列包括至少一个主磁盘和至少一个备磁盘。
[0024]第二方面,本专利技术实施例还提供一种数据处理装置,装置应用于服务器,服务器配置有多个候选传输设备标识和候选存储设备标识,方法包括:
[0025]参数获取模块,获取目标车辆配置的传感器组的传感器参数;
[0026]需求确定模块,根据传感器参数计算目标车辆的传输存储需求;其中,传输存储需求包括传输速率需求和存储内存需求;
[0027]数据存储模块,根据传输存储需求分别从候选传输设备标识中确定目标传输设备标识,以及从候选存储设备标识中确定目标存储设备标识,以通过目标传输设备标识对应的数据传输设备,将传感器组采集的环境数据传输至目标存储设备标识对应的数据存储设备进行存储。
[0028]第三方面,本专利技术实施例还提供一种服务器,包括处理器和存储器,存储器存储有能够被处理器执行的计算机可执行指令,处理器执行计算机可执行指令以实现第一方面提供的任一项的方法。
[0029]第四方面,本专利技术实施例还提供一种计算机可读存储介质,计算机可读存储介质存储有计算机可执行指令,计算机可执行指令在被处理器调用和执行时,计算机可执行指令促使处理器实现第一方面提供的任一项的方法。
[0030]本专利技术实施例带来了以下有益效果:
[0031]本专利技术实施例提供的一种数据处理方法、装置及服务器,其中,服务器配置有多个候选传输设备标识以及候选存储设备标识,首先通过对目标车辆配置的传感器组的传感器参数进行分析计算,确定目标车辆的传输存储需求,并基于传输存储需求从多个候选传输设备标识以及候选存储设备标识中选择对应的目标传输设备标识以及目标存储设备标识,从而对传感器组采集的环境数据进行数据传输和数据存储。上述方法可以根据传感器参数自动选择满足传输存储速率需求的目标传输设备标识以及目标存储设备标识,相较于相关技术中,通过传输速率较低并且存在区域限制的云服务器实现数据传输存储,本专利技术实施例可以在多个候选传输设备标识以及候选存储设备标识中,根据实际需求进行选择,从而
较好地兼顾数据传输存储需求和数据传输存储成本。
[0032]本专利技术的其他特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本专利技术而了解。本专利技术的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
[0033]为使本专利技术的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
[0034]为了更清楚地说明本专利技术具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本专利技术的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0035]图1为本专利技术实施例提供的一种服务器的结构示意图;
[0036]图2为本专利技术实施例提供的一种数据处理方法的流程示意图;
[0037]图3为本专利技术实施例提供的一种数据处理方法的架构图;
[0038]图4为本专利技术实施例提供的一种目标车辆的结构示意图;
[0039]图5为本专利技术实施例提供的另一种数据处理方法的流程示意图;
本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种数据处理方法,其特征在于,所述方法应用于服务器,所述服务器配置有多个候选传输设备标识和候选存储设备标识,所述方法包括:获取目标车辆配置的传感器组的传感器参数;根据所述传感器参数计算所述目标车辆的传输存储需求;其中,所述传输存储需求包括传输速率需求和存储内存需求;根据所述传输存储需求分别从所述候选传输设备标识中确定目标传输设备标识,以及从所述候选存储设备标识中确定目标存储设备标识,以通过所述目标传输设备标识对应的数据传输设备,将所述传感器组采集的环境数据传输至所述目标存储设备标识对应的数据存储设备进行存储。2.根据权利要求1所述的方法,其特征在于,所述传感器组包括多个图像采集设备;所述根据所述传感器参数计算所述目标车辆的传输存储需求的步骤,包括:根据所述传感器参数计算所述传感器组中每个所述图像采集设备对应的单帧图像占用内存;其中,所述传感器参数包括图像尺寸、图像编码规则和采样帧率;根据所述图像采集设备的设备数量和所述单帧图像占用内存计算所述目标车辆的传输速率需求。3.根据权利要求2所述的方法,其特征在于,所述根据所述传感器参数计算所述传感器组中每个所述图像采集设备对应的单帧图像占用内存的步骤,包括:根据所述图像编码规则确定单像素点占用内存;计算所述单像素点内存与所述图像尺寸的乘积,得到所述传感器组中每个所述图像采集设备对应的单帧图像占用内存。4.根据权利要求2所述的方法,其特征在于,所述根据所述图像采集设备的设备数量和所述单帧图像占用内存计算所述目标车辆的传输速率需求的步骤,包括:计算所述图像采样设备的设备数量、所述单帧图像占用内存和所述采样帧率的乘积,得到目标车辆的传输速率需求。5.根据权利要求1所述的方法,其特征在于,所述根据所述传感器参数计算所述目标车辆的传输存储需求的步骤,还包括:根据所述传输速率需求和预设...
【专利技术属性】
技术研发人员:李广奎,李同柱,王星,郑磊,刘铁映,高东亮,
申请(专利权)人:苏州挚途科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。