【技术实现步骤摘要】
本公开涉及数据处理领域，具体地，涉及一种路网数据处理方法、装置、介质、设备及计算机程序产品。
技术介绍
1、路网数据是指描述一定区域内道路网络结构的数据集合，这些数据通常以数字化格式存储，包含了道路的几何形状、连接关系、道路等级、道路名称、通行方向、路段长度等信息。路网数据在地理信息系统和导航应用中扮演着重要角色。
2、在路网数据的生产过程中，为了保证路网数据的生产质量，需要对路网数据进行全量数据检测以及数据标注等数据处理任务，以满足应用程序对路网数据的使用需求。
技术实现思路
1、提供该
技术实现思路
部分以便以简要的形式介绍构思，这些构思将在后面的具体实施方式部分被详细描述。该
技术实现思路
部分并不旨在标识要求保护的技术方案的关键特征或必要特征，也不旨在用于限制所要求的保护的技术方案的范围。
2、第一方面，本公开提供一种路网数据处理方法，应用于分布式数据处理系统中的主节点，所述方法包括：
3、对待处理路网数据进行边界切分，得到多组路网数据分别对应的边界信息；
4、针对每组所述路网数据，将该组路网数据对应的边界信息发送至目标从节点，以使所述目标从节点根据所述边界信息加载该组路网数据后，对该组路网数据进行数据处理，所述目标从节点为所述分布式数据处理系统中未分配有路网数据的任一从节点；
5、接收每个所述目标从节点分别发送的数据处理结果，并根据所述数据处理结果确定所述待处理路网数据的目标处理结果。
6、第二方面，提供一种
7、接收所述分布式数据处理系统中的主节点发送的第二路网数据的边界信息，所述第二路网数据为所述主节点对待处理路网数据进行边界切分后，得到的多组路网数据中的任一组路网数据；
8、根据所述边界信息加载所述第二路网数据；
9、对所述第二路网数据进行数据处理，并将数据处理结果发送至所述主节点。
10、第三方面，提供一种路网数据处理装置，应用于分布式数据处理系统中的主节点，所述装置包括：
11、边界确定模块，用于对待处理路网数据进行边界切分，得到多组路网数据分别对应的边界信息；
12、发送模块，用于针对每组所述路网数据，将该组路网数据对应的边界信息发送至目标从节点，以使所述目标从节点根据所述边界信息加载该组路网数据后，对该组路网数据进行数据处理，所述目标从节点为所述分布式数据处理系统中未分配有路网数据的任一从节点；
13、处理结果确定模块，用于接收每个所述目标从节点分别发送的数据处理结果，并根据所述数据处理结果确定所述待处理路网数据的目标处理结果。
14、第四方面，提供一种路网数据处理装置，应用于分布式数据处理系统的中的从节点，所述装置包括：
15、接收模块，用于接收所述分布式数据处理系统中的主节点发送的第二路网数据的边界信息，所述第二路网数据为所述主节点对待处理路网数据进行边界切分后，得到的多组路网数据中的任一组路网数据，所述边界信息包括所述第二路网数据对应的地图上的至少一个图幅的图幅边界；
16、数据加载模块，用于根据所述边界信息加载所述第二路网数据；
17、数据处理模块，用于对所述第二路网数据进行数据处理，并将数据处理结果发送至所述主节点。
18、第五方面，提供一种计算机可读介质，其上存储有计算机程序，该程序被处理装置执行时实现本公开第一方面或者第二方面所述方法的步骤。
19、第六方面，提供一种电子设备，包括：
20、存储装置，其上存储有计算机程序；
21、处理装置，用于执行所述存储装置中的所述计算机程序，以实现本公开第一方面或者第二方面所述方法的步骤。
22、第七方面，提供一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现本公开第一方面或者第二方面所述的方法的步骤。
23、通过上述技术方案，分布式数据处理系统中的主节点可以对待处理路网数据进行边界切分，得到多组路网数据分别对应的边界信息；针对每组所述路网数据，将该组路网数据对应的边界信息发送至目标从节点，以使所述目标从节点根据所述边界信息加载该组路网数据后，对该组路网数据进行数据处理，所述目标从节点为所述分布式数据处理系统中未分配有路网数据的任一从节点；接收每个所述目标从节点分别发送的数据处理结果，并根据所述数据处理结果确定所述待处理路网数据的目标处理结果。这样，基于分布式的数据处理系统，可以跟随待处理路网数据的数据量自动调整所需的从节点数量(即支持从节点的横向扩容)。并且在从节点资源充足的情况下，可以快速提升数据处理性能，且不依赖大规格的硬件节点，进而能够高效、全面、可扩展、可伸缩的完成任意规模数据集的路网数据处理。
24、本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。
本文档来自技高网...【技术保护点】
1.一种路网数据处理方法，其特征在于，应用于分布式数据处理系统中的主节点，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述对待处理路网数据进行边界切分，得到多组路网数据分别对应的边界信息包括：
3.根据权利要求2所述的方法，其特征在于，所述根据所述缩放参数和所述路网边界对所述地图进行切分，得到多个第一图幅包括：
4.根据权利要求1所述的方法，其特征在于，所述对待处理路网数据进行边界切分，得到多组路网数据分别对应的边界信息包括：
5.根据权利要求4所述的方法，其特征在于，所述根据所述待处理路网数据的数据量、所述目标从节点的数量以及每个所述第二图幅对应的路网数据的数据量，对所述多个第二图幅进行图幅组合得到多个图幅集合包括：
6.根据权利要求4所述的方法，其特征在于，所述针对每组所述路网数据，将该组路网数据对应的边界信息发送至目标从节点包括：
7.根据权利要求1-6任一项所述的方法，其特征在于，所述方法还包括：
8.一种路网数据处理方法，其特征在于，应用于分布式数据处理系统中的从节点，所述
9.根据权利要求8所述的方法，其特征在于，所述边界信息包括所述第二路网数据在对应的地图上的第一图幅的图幅边界；所述第二路网数据包括对应的无向图中的边实体数据、节点实体数据；所述第一图幅包括所述主节点根据所述地图的缩放参数和所述待处理路网数据的路网边界，对所述待处理路网数据对应的地图进行切分后得到的图幅；
10.根据权利要求9所述的方法，其特征在于，所述第二路网数据还包括实体关系数据，所述实体关系数据表征所述边实体数据和/或所述节点实体数据之间的实体关联关系；
11.根据权利要求8所述的方法，其特征在于，所述边界信息包括目标图幅集合中包括的至少一个第二图幅中，每个第二图幅分别对应的图幅边界；所述目标图幅集合为多个图幅集合中的任一图幅集合，所述多个图幅集合为所述主节点对多个第二图幅进行图幅组合后得到的，所述第二图幅为所述主节点根据新的缩放参数和所述待处理路网数据的路网边界，对所述待处理路网数据对应的地图进行切分后得到的，所述新的缩放参数为所述主节点对所述地图的缩放参数进行调整后得到的；
12.根据权利要求11所述的方法，其特征在于，所述对所述第二路网数据进行数据处理包括：
13.一种路网数据处理装置，其特征在于，应用于分布式数据处理系统中的主节点，所述装置包括：
14.一种路网数据处理装置，其特征在于，应用于分布式数据处理系统的中的从节点，所述装置包括：
15.一种计算机可读介质，其上存储有计算机程序，其特征在于，该程序被处理装置执行时实现权利要求1-7或者8-12中任一项所述方法的步骤。
16.一种电子设备，其特征在于，包括：
17.一种计算机程序产品，包括计算机程序，其特征在于，该计算机程序被处理器执行时实现权利要求1-7或者8-12中任一项所述方法的步骤。
...【技术特征摘要】
1.一种路网数据处理方法，其特征在于，应用于分布式数据处理系统中的主节点，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述对待处理路网数据进行边界切分，得到多组路网数据分别对应的边界信息包括：
3.根据权利要求2所述的方法，其特征在于，所述根据所述缩放参数和所述路网边界对所述地图进行切分，得到多个第一图幅包括：
4.根据权利要求1所述的方法，其特征在于，所述对待处理路网数据进行边界切分，得到多组路网数据分别对应的边界信息包括：
5.根据权利要求4所述的方法，其特征在于，所述根据所述待处理路网数据的数据量、所述目标从节点的数量以及每个所述第二图幅对应的路网数据的数据量，对所述多个第二图幅进行图幅组合得到多个图幅集合包括：
6.根据权利要求4所述的方法，其特征在于，所述针对每组所述路网数据，将该组路网数据对应的边界信息发送至目标从节点包括：
7.根据权利要求1-6任一项所述的方法，其特征在于，所述方法还包括：
8.一种路网数据处理方法，其特征在于，应用于分布式数据处理系统中的从节点，所述方法包括：
9.根据权利要求8所述的方法，其特征在于，所述边界信息包括所述第二路网数据在对应的地图上的第一图幅的图幅边界；所述第二路网数据包括对应的无向图中的边实体数据、节点实体数据；所述第一图幅包括所述主节点根据所述地图的缩放参数和所述待处理路网数据的路网边界，对所述待处理路网数据对应的地...
【专利技术属性】
技术研发人员：谢赛东，顾振强，
申请(专利权)人：北京抖音智图科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。