【技术实现步骤摘要】
本申请涉及数据处理，尤其涉及一种目标数据处理方法、装置、电子设备及介质。
技术介绍
1、自动驾驶仿真场景有两个来源，一个是手动编辑得到的场景，即worldsim，还有一种则是通过自动驾驶系统采集数据进行处理后得到的场景，即logsim。二者比较来看，worldsim场景优点是可高度定制化，缺点是耗费人工成本巨大，logsim场景优点则是直接采集生成，是对现实场景的完全复现，同时会包含车辆硬件问题，能够更好的测试自动驾驶系统能力。
2、但是，现有技术中通常是专门采集特定地区车辆行驶过程的数据从而产生logsim场景，局限性大，而如果能直接对车辆日常测试过程采集的数据进行logsim场景生成，那么就可以大批量的产生logsim场景，但是由路采数据得到logsim场景的过程目前存在两个问题，一是大批量的路采数据如何高效处理；二是由于路采数据需要进行全量采集，受限于硬盘格式等因素对单个文件大小的限制，造成生成的单个数据的时长过短，导致由此生成的logsim时间过短，无法很好的测试算法能力。
技术实现思路
1、本申请提供了一种目标数据处理方法、装置、电子设备及介质，以实现根据海量的自动驾驶车辆数据生成特定区间内的场景信息。
2、根据本申请的一方面，提供了一种目标数据处理方法，所述方法包括：
3、通过数据提取镜像创建至少两个容器，通过至少两个容器从分布式存储系统中提取待处理数据；
4、通过数据连续性识别镜像创建至少两个容器，通过至少两个容器对待处
5、通过拼接与裁剪识别镜像创建至少两个容器，通过至少两个容器根据连续性识别结果对待处理数据进行拼接与裁剪识别，确定待处理数据的拼接与裁剪识别结果；
6、通过拼接与裁剪处理镜像创建至少两个容器，通过至少两个容器根据拼接与裁剪识别结果，对待处理数据进行拼接和/或裁剪处理，得到目标数据。
7、根据本申请的另一方面，提供了一种目标数据处理装置，所述装置包括：
8、数据提取模块，用于通过数据提取镜像创建至少两个容器，通过至少两个容器从分布式存储系统中提取待处理数据；
9、数据连续性识别模块，用于通过数据连续性识别镜像创建至少两个容器，通过至少两个容器对待处理数据进行连续性识别，确定待处理数据的连续性识别结果；
10、拼接与裁剪识别结果确定模块，用于通过拼接与裁剪识别镜像创建至少两个容器，通过至少两个容器根据连续性识别结果对待处理数据进行拼接与裁剪识别，确定待处理数据的拼接与裁剪识别结果；
11、处理模块，用于通过拼接与裁剪处理镜像创建至少两个容器，通过至少两个容器根据拼接与裁剪识别结果，对待处理数据进行拼接和/或裁剪处理，得到目标数据。
12、根据本申请的另一方面，提供了一种电子设备，该设备包括：
13、至少一个处理器；以及
14、与至少一个处理器通信连接的存储器；其中，
15、存储器存储有可被至少一个处理器执行的计算机程序，计算机程序被至少一个处理器执行，以使至少一个处理器能够执行本申请任一实施例的目标数据处理方法。
16、根据本申请的另一方面，提供了一种计算机可读存储介质，计算机可读存储介质存储有计算机指令，计算机指令用于使处理器执行时实现本申请任一实施例的目标数据处理方法。
17、本申请实施例的技术方案，通过数据提取镜像创建容器，并通过容器对待处理数据进行提取，实现了通过多容器高并发的提取待处理数据，提高了数据提取的效率；通过数据连续性识别镜像创建容器，通过创建完成的容器对待处理数据的连续性进行识别，实现了采用多容器高并发的识别待处理数据的连续性，提高了识别的效率；通过拼接与裁剪识别镜像及拼接与裁剪处理镜像对待处理数据是否需要拼接和/或裁剪进行判断，根据判断的结果对待处理数据进行拼接和/或裁剪处理，可以实现根据指定预设时长区间生成目标数据。该方法通过多容器高并发的处理方式对待处理数据进行处理，根据拼接和裁剪镜像以及相应的裁剪规则对待处理数据进行处理，提高了数据处理效率的同时，能够根据用户的需求生成指定时长的数据，使得到的目标数据能更有效的进行仿真测试。
18、应当理解，本部分所描述的内容并非旨在标识本申请的实施例的关键或重要特征，也不用于限制本申请的范围。本申请的其它特征将通过以下的说明书而变得容易理解。
本文档来自技高网...【技术保护点】
1.一种目标数据处理方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，通过至少两个容器根据所述连续性识别结果对所述待处理数据进行拼接与裁剪识别，确定待处理数据的拼接与裁剪识别结果，包括：
3.根据权利要求2所述的方法，其特征在于，根据所述连续时长、预设时长区间的上限值以及预设时长区间的下限值，确定拼接与裁剪识别结果，包括：
4.根据权利要求1所述的方法，其特征在于，通过至少两个容器根据所述拼接与裁剪识别结果，对所述待处理数据进行拼接和/或裁剪处理，包括：
5.根据权利要求1-4中任一项所述的方法，其特征在于，通过至少两个容器根据所述拼接与裁剪识别结果，对所述待处理数据进行拼接和/或裁剪处理，包括：
6.根据权利要求1所述的方法，其特征在于，所述方法还包括：
7.根据权利要求1所述的方法，其特征在于，所述方法还包括：
8.一种目标数据处理装置，其特征在于，所述装置包括：
9.一种电子设备，其特征在于，所述设备包括：
10.一种计算机可读存储介质，其特
...【技术特征摘要】
1.一种目标数据处理方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，通过至少两个容器根据所述连续性识别结果对所述待处理数据进行拼接与裁剪识别，确定待处理数据的拼接与裁剪识别结果，包括：
3.根据权利要求2所述的方法，其特征在于，根据所述连续时长、预设时长区间的上限值以及预设时长区间的下限值，确定拼接与裁剪识别结果，包括：
4.根据权利要求1所述的方法，其特征在于，通过至少两个容器根据所述拼接与裁剪识别结果，对所述待处理数据进行拼接和/或裁剪处理，包括：
5.根据权利要求1-4中任一...
【专利技术属性】
技术研发人员：王振东，陈光，段锐，刘坤鹏，葛绍亮，刘加银，任思阳，罗泽文，胡宁，薛儒麟，
申请(专利权)人：中国第一汽车股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。