一种高精地图计算作业执行失败的处理方法及装置制造方法及图纸

本公开提供了一种高精地图计算作业执行失败的处理方法及装置，涉及计算机技术领域，尤其涉及高精地图领域。具体实现方案为：响应于计算作业执行失败，获取所述计算作业的运行日志；基于所述运行日志确定所述计算作业执行失败的错误类型，所述错误类型包括：系统稳定性错误和人为研发性错误；当所述错误类型为系统稳定性错误，重新执行所述计算作业；当所述错误类型为人为研发性错误，生成人工介入的提示信息。节约了对计算作业执行失败进行处理所需的时间，从而提高了计算作业的执行效率和稳定性。定性。定性。

【技术实现步骤摘要】
一种高精地图计算作业执行失败的处理方法及装置


[0001]本公开涉及计算机
，尤其涉及高精地图


技术介绍

[0002]高精地图也称高精度地图，是自动驾驶汽车使用。高精地图，拥有精确的车辆位置信息和丰富的道路元素数据信息，可以帮助汽车预知路面复杂信息，如坡度、曲率、航向等，更好地规避潜在的风险。高精地图相比于普通地图，数据规模更大因而需要更高的计算性能和计算效率。在大量计算作业运行的过程中，计算作业会因为各种各样的问题而执行失败，为了提升计算作业的执行效率，有必要针对计算作业执行失败进行分析和处理。

技术实现思路

[0003]本公开提供了一种高精地图计算作业执行失败的处理方法、装置、设备以及存储介质。
[0004]根据本公开的一方面，提供了一种高精地图计算作业执行失败的处理方法，包括：
[0005]响应于计算作业执行失败，获取所述计算作业的运行日志；
[0006]基于所述运行日志确定所述计算作业执行失败的错误类型，所述错误类型包括：系统稳定性错误和人为研发性错误；
[0007]当所述错误类型为系统稳定性错误，重新执行所述计算作业；
[0008]当所述错误类型为人为研发性错误，生成人工介入的提示信息；
[0009]所述运行日志包括驱动程序dr iver日志和任务task日志；
[0010]所述基于所述运行日志确定所述计算作业执行失败的错误类型的步骤，包括：
[0011]基于所述driver日志和所述task日志确定所述计算作业执行失败的错误类型；
[0012]当所述dr iver日志中存在错误信息，确定所述计算作业执行失败的错误类型为系统稳定性错误；
[0013]当所述task日志中存在错误信息，基于所述task日志中的错误信息确定所述计算作业执行失败的错误类型。
[0014]根据本公开的另一方面，提供了一种高精地图计算作业执行失败的处理装置，包括：
[0015]获取模块，用于响应于计算作业执行失败，获取所述计算作业的运行日志；
[0016]确定模块，用于基于所述运行日志确定所述计算作业执行失败的错误类型，所述错误类型包括：系统稳定性错误和人为研发性错误；
[0017]执行模块，用于当所述错误类型为系统稳定性错误，重新执行所述计算作业；
[0018]生成模块，用于当所述错误类型为人为研发性错误，生成人工介入的提示信息。
[0019]根据本公开的第三方面，提供了一种电子设备，包括：
[0020]至少一个处理器；以及
[0021]与所述至少一个处理器通信连接的存储器；其中，
[0022]所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行高精地图计算作业执行失败的处理方法。
[0023]根据本公开的第四方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行高精地图计算作业执行失败的处理方法。
[0024]根据本公开的第五方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现高精地图计算作业失败的处理方法。
[0025]应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0026]附图用于更好地理解本方案，不构成对本公开的限定。其中：
[0027]图1是本公开实施例提供的高精地图计算作业执行失败的处理方法的一种流程示意图；
[0028]图2是本公开实施例提供的高精地图计算作业执行失败的处理方法的另一种流程示意图；
[0029]图3是本公开实施例提供的高精地图计算作业执行失败的处理方法的示意图；
[0030]图4是用来实现本公开实施例提供的高精地图计算作业执行失败的处理方法的装置的框图；
[0031]图5是本公开实施例提供的电子设备的框图。
具体实施方式
[0032]以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
[0033]在计算机
，许多计算任务都是由大批量的计算作业组成的。在大量计算作业运行的过程中，计算作业会因为各种各样的问题而失败。在计算作业运行失败时，目前的处理方案主要包括以下两种：
[0034]方案一：计算作业报错后，人工介入查看失败原因，根据失败原因确定处理方法。
[0035]方案二：计算作业报错后直接重试。
[0036]但在实际应用中，以上两种方案均存在一定的缺点。相关负责人员无法第一时间查看错误原因并对计算作业执行失败进行处理，因此方案一会降低计算作业的执行效率。
[0037]此外，计算作业失败仅在部分情况下可以通过重试解决。在其它情况下重试，计算作业依然无法正常执行，因此方案二采用直接重试的处理方法不仅会降低计算作业的执行效率，还会消耗计算资源。
[0038]为解决上述问题，本公开提供了一种高精地图计算作业执行失败的处理方法、装置、电子设备以及存储介质。
[0039]图1是本公开实施例提供的高精地图计算作业执行失败的处理方法的一种流程示意图，如图1所示，该方法包括以下步骤：
[0040]步骤S101：响应于计算作业执行失败，获取计算作业的运行日志。
[0041]本公开实施例中，计算作业可以是运行于计算平台的作业，例如运行于Spark平台的作业。
[0042]在计算作业运行的过程中，可能出现各类问题，导致无法得到预期结果，即计算作业执行失败。
[0043]在检测到计算作业执行失败时，获取计算作业的运行日志。
[0044]步骤S102：基于运行日志确定计算作业执行失败的错误类型，错误类型包括：系统稳定性错误和人为研发性错误。
[0045]具体的，人为研发性错误即在研发计算作业的代码的过程中出现的错误，示例性的，人为研发性错误可能为计算作业的参数配置错误、业务逻辑存在异常等。与之相对应的，系统稳定性错误即外部因素所导致的，具有一定随机性的错误，例如，服务器负载过高等，这种系统稳定性错误可以通过重新执行计算作业得到解决。
[0046]步骤S103：当错误类型为系统稳定性错误，重新执行计算作业。
[0047]在本公开的一个实施例中，这里的重新执行可以理解为重试计算作业。
[0048]步骤S104：当错误类型为人为研发性错误，生成人工介入的提示信息。
[0049]具体的，本公开实施例中，在错误类型为系统稳定性错误的情况下，重新执行计算作业，实现自动化处理。在本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种高精地图计算作业执行失败的处理方法，包括：响应于计算作业执行失败，获取所述计算作业的运行日志；基于所述运行日志确定所述计算作业执行失败的错误类型，所述错误类型包括：系统稳定性错误和人为研发性错误；当所述错误类型为系统稳定性错误，重新执行所述计算作业；当所述错误类型为人为研发性错误，生成人工介入的提示信息；所述运行日志包括驱动程序driver日志和任务task日志；所述基于所述运行日志确定所述计算作业执行失败的错误类型的步骤，包括：基于所述driver日志和所述task日志确定所述计算作业执行失败的错误类型；当所述driver日志中存在错误信息，确定所述计算作业执行失败的错误类型为系统稳定性错误；当所述task日志中存在错误信息，基于所述task日志中的错误信息确定所述计算作业执行失败的错误类型。2.根据权利要求1所述的方法，其中，所述基于所述task日志中的错误信息确定所述计算作业执行失败的错误类型的步骤，包括：当所述task日志中错误信息表征所述计算作业的task任务在执行过程中出现系统稳定性错误，确定所述计算作业执行失败的错误类型为系统稳定性错误；当所述task日志中错误信息表征所述计算作业的task任务的任一子进程的退出码错误，确定所述计算作业执行失败的错误类型为人为研发性错误。3.根据权利要求1所述的方法，其中，所述系统稳定性错误包括以下一种或多种：外部存储异常、服务器负载超负荷、网络拥堵和部分接口访问超时。4.根据权利要求2所述的方法，所述task日志中还包括多个task定位信息，每个所述task定位信息用于标识所述计算作业中的一个task；所述当所述错误类型为人为研发性错误，生成人工介入的提示信息的步骤，包括：当所述错误类型为人为研发性错误，基于所述错误信息、所述错误信息对应的task定位信息生成人工介入的提示信息。5.根据权利要求1所述的方法，其中，所述计算作业为运行在Spark上的高精地图绘制作业。6.一种高精地图计算作业执行失败的处理装置，包括：获取模块，用于响应于计算作业执行失败，获取所述计算作业的运行日志；确定模块，用于基于所述运行日志确定所述计算作业执行失败的错误类型，所述错误类型包括：系统稳定性错误和人为研发性错误；执行模块，用于当所述错误类型为系统稳定性错误，重新...

【专利技术属性】
技术研发人员：辛修坤，古新才，栾伟，
申请(专利权)人：北京百度网讯科技有限公司，
类型：发明
国别省市：