确定路面高度的方法技术

本发明专利技术涉及三维重建技术领域，公开了确定路面高度的方法

【技术实现步骤摘要】
确定路面高度的方法、装置、计算机设备及存储介质


[0001]本专利技术涉及三维重建
，具体涉及确定路面高度的方法
、
装置
、
计算机设备及存储介质
。

技术介绍

[0002]在三维场景重建
，对整个场景进行重建时，一般会将三维场景重建算法进行解耦，分为地上物重建和地面重建
。
[0003]在进行地面重建时，地面重建算法一般会假设地面是平的
。
但实际上，大多数地面都是有起伏的
。
因此，通过该地面重建算法进行地面重建，得到的路面三维模型的准确性较低
。

技术实现思路

[0004]有鉴于此，本专利技术提供了一种确定路面高度的方法
、
装置
、
计算机设备及存储介质，以解决三维重建的路面三维模型的准确性较低的问题
。
[0005]第一方面，本专利技术提供了一种确定路面高度的方法，所述方法包括：获取目标车辆在目标路面行驶过程中拍摄的多帧图像，以及预设路面宽度；基于所述多帧图像，获取目标轨迹，其中，所述目标轨迹中包括多个轨迹点分别对应的轨迹坐标以及多个轨迹点分别对应的路面高度，所述轨迹坐标用以指示所述目标车辆在与所述目标路面对应的参考坐标系中的路面坐标；基于所述预设路面宽度和所述目标轨迹中每个轨迹点对应的路面坐标，确定与所述目标路面对应的路面重建范围；基于预配置的网格大小，对所述路面重建范围对应的三维空间进行网格化，得到所述路面重建范围对应的多个网格；基于所述目标轨迹中每个轨迹点对应的所述路面坐标，确定每两个相邻轨迹点之间的距离；基于所述每两个相邻轨迹点之间的距离和所述预设路面宽度，确定每两个相邻轨迹点之间的覆盖路面范围；在所述路面重建范围对应的多个网格中选取所述覆盖路面范围所涵盖的多个网格；将第一组相邻的两个轨迹点中目标轨迹点对应的路面高度确定为第一组相邻的两个轨迹点所对应的覆盖路面范围涵盖的多个网格中每个网格顶点的路面高度，其中，所述第一组相邻的两个轨迹点为所述目标轨迹中任一组相邻的两个轨迹点，所述目标轨迹点为所述第一组相邻的两个轨迹点中的第一个轨迹点
。
[0006]本专利技术提供了一种确定路面高度的方法，具有如下优点：由于路面高低起伏不平，如果将路面对应的多个网格中每个网格顶点的路面高度都确定为零，则导致构建的路面三维重建模型不准确
。
因此，通过目标车辆在目标路面行驶
过程中拍摄的图像生成目标轨迹，目标轨迹中的每个点对应目标车辆在目标路面所属的参考坐标系中的位姿，即路面坐标和路面高度
。
进而，通过对路面重建范围对应的多个网格和覆盖路面范围对应的多个网格进行比对，可以确定出路面重建范围对应的多个网格中每个网格顶点的路面高度
。
这样，考虑到了路面的起伏情况，可以提高构建路面三维重建模型的准确性
。
[0007]在一种可选的实施方式中，所述基于所述预设路面宽度和所述目标轨迹中每个轨迹点对应的路面坐标，确定与所述目标路面对应的路面重建范围，包括：基于所述预设路面宽度和所述目标轨迹中每个轨迹点的路面坐标，得到所述目标路面对应的轨迹点云，以及所述轨迹点云中每个轨迹点的路面坐标；基于所述轨迹点云中每个轨迹点的路面坐标，确定所述路面重建范围
。
[0008]具体地，由于路面的整体形状可能并不是规则的，如果直接按规则形状确定路面重建范围，可能导致确定出的路面重建范围过大或过小，过大会导致后续进行模型重建时，占用处理资源较多，导致模型重建效率较低，过小会导致部分关键信息遗漏
。
因此，通过目标轨迹中每个轨迹点的路面坐标和预设路面宽度确定路面重建范围，可以考虑到目标路面的实际情况，可以提高构建路面三维重建模型的准确性
。
[0009]在一种可选的实施方式中，所述路面重建范围对应的多个网格中每个网格顶点还包括色彩值和语义类别，所述方法还包括：基于所述多帧图像，获取每一帧图像对应的相机位姿和相机配置信息，其中，所述多帧图像中每帧图像与所述目标轨迹中的一个轨迹点相对应；对于所述多帧图像中的第一帧图像，基于所述第一帧图像对应的所述相机位姿
、
所述相机配置信息，以及轨迹点，确定所述第一帧图像中每个像素在所述参考坐标系下的方位向量，其中，所述第一帧图像为所述多帧图像中的任一帧图像；当存在至少一帧图像中的像素在所述参考坐标系下的方位向量与所述路面重建范围对应的多个网格中任一个网格存在交点时，在当前迭代周期内，基于所述交点对应的网格中每一个网格顶点的色彩值和预配置的插值算法，确定所述交点的预测色彩值；将距离所述交点最近的网格顶点的语义类别确定为所述交点的预测语义类别；基于所述预测色彩值
、
所述预测语义类别
、
所述交点对应的像素在其所属图像中的真实色彩值和真实语义类别，确定第一损失值；基于预设的梯度算法和所述预测色彩值，对所述路面重建范围对应的多个网格中每个网格顶点的色彩值进行更新，以及基于预设的梯度算法和所述预测语义类别，对所述路面重建范围对应的多个网格中每个网格顶点的语义类别进行更新；当确定所述第一损失值满足收敛条件时，停止迭代过程；或者，当确定所述第一损失值未满足收敛条件时，进入下一迭代周期，重新对所述重建范围对应的多个网格中每个网格顶点的色彩值和语义类别进行更新
。
[0010]具体地，由于图像中包括每个像素的色彩值信息，并且，对图像进行语义分割也可以得到该图像中每个像素的语义类别
。
因此，通过网格和像素的比对，可以确定出路面重建范围对应的多个网格中每个网格顶点的色彩值和语义类别
。
进一步，结合每个网格顶点的路面坐标
、
路面高度
、
色彩值和语义类别，进行路面的三维模型重建，可以得到较为准确的路面的三维重建模型
。
[0011]在一种可选的实施方式中，所述对于所述多帧图像中的第一帧图像，基于所述第一帧图像对应的所述相机位姿
、
所述相机配置信息，以及轨迹点，确定所述第一帧图像中每个像素在所述参考坐标系下的方位向量，包括：对于所述多帧图像中的第一帧图像，基于所述第一帧图像对应的相机位姿和轨迹点，确定所述第一帧图像对应的坐标系转换参数；基于所述第一帧图像对应的相机配置信息，确定所述第一帧图像中每个像素在其所属的相机坐标系下的方位向量；基于所述第一帧图像对应的坐标系转换参数，对所述第一帧图像中的每个像素在其所属的相机坐标系下的方位向量进行坐标转换，得到所述第一帧图像中的每个像素在所述参考坐标系下的方位向量
。
[0012]具体地，由于图像对应的是相机坐标系，路面重建范围对应的多个网格是在参考坐标系下，而在后续处理中需要对图像中的像素和路面重建范围的网格进行匹配
。
因此，需要将图像转换到参考坐标系下，为每个网格顶点确定色彩值和语义类别
。
进一步，可以得到带有色彩信息和语义信本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种确定路面高度的方法，其特征在于，所述方法包括：获取目标车辆在目标路面行驶过程中拍摄的多帧图像，以及预设路面宽度；基于所述多帧图像，获取目标轨迹，其中，所述目标轨迹中包括多个轨迹点分别对应的轨迹坐标以及多个轨迹点分别对应的路面高度，所述轨迹坐标用以指示所述目标车辆在与所述目标路面对应的参考坐标系中的路面坐标；基于所述预设路面宽度和所述目标轨迹中每个轨迹点对应的路面坐标，确定与所述目标路面对应的路面重建范围；基于预配置的网格大小，对所述路面重建范围对应的三维空间进行网格化，得到所述路面重建范围对应的多个网格；基于所述目标轨迹中每个轨迹点对应的所述路面坐标，确定每两个相邻轨迹点之间的距离；基于所述每两个相邻轨迹点之间的距离和所述预设路面宽度，确定每两个相邻轨迹点之间的覆盖路面范围；在所述路面重建范围对应的多个网格中选取所述覆盖路面范围所涵盖的多个网格；将第一组相邻的两个轨迹点中目标轨迹点对应的路面高度确定为第一组相邻的两个轨迹点所对应的覆盖路面范围涵盖的多个网格中每个网格顶点的路面高度，其中，所述第一组相邻的两个轨迹点为所述目标轨迹中任一组相邻的两个轨迹点，所述目标轨迹点为所述第一组相邻的两个轨迹点中的第一个轨迹点
。2.
根据权利要求1所述的方法，其特征在于，所述基于所述预设路面宽度和所述目标轨迹中每个轨迹点对应的路面坐标，确定与所述目标路面对应的路面重建范围，包括：基于所述预设路面宽度和所述目标轨迹中每个轨迹点的路面坐标，得到所述目标路面对应的轨迹点云，以及所述轨迹点云中每个轨迹点的路面坐标；基于所述轨迹点云中每个轨迹点的路面坐标，确定所述路面重建范围
。3.
根据权利要求2所述的方法，其特征在于，所述路面重建范围对应的多个网格中每个网格顶点还包括色彩值和语义类别，所述方法还包括：基于所述多帧图像，获取每一帧图像对应的相机位姿和相机配置信息，其中，所述多帧图像中每帧图像与所述目标轨迹中的一个轨迹点相对应；对于所述多帧图像中的第一帧图像，基于所述第一帧图像对应的所述相机位姿
、
所述相机配置信息，以及轨迹点，确定所述第一帧图像中每个像素在所述参考坐标系下的方位向量，其中，所述第一帧图像为所述多帧图像中的任一帧图像；当存在至少一帧图像中的像素在所述参考坐标系下的方位向量与所述路面重建范围对应的多个网格中任一个网格存在交点时，在当前迭代周期内，基于所述交点对应的网格中每一个网格顶点的色彩值和预配置的插值算法，确定所述交点的预测色彩值；将距离所述交点最近的网格顶点的语义类别确定为所述交点的预测语义类别；基于所述预测色彩值
、
所述预测语义类别
、
所述交点对应的像素在其所属图像中的真实色彩值和真实语义类别，确定第一损失值；基于预设的梯度算法和所述预测色彩值，对所述路面重建范围对应的多个网格中每个网格顶点的色彩值进行更新，以及基于预设的梯度算法和所述预测语义类别，对所述路面重建范围对应的多个网格中每个网格顶点的语义类别进行更新；
当确定所述第一损失值满足收敛条件时，停止迭代过程；或者，当确定所述第一损失值未满足收敛条件时，进入下一迭代周期，重新对所述重建范围对应的多个网格中每个网格顶点的色彩值和语义类别进行更新
。4.
根据权利要求3所述的方法，其特征在于，所述对于所述多帧图像中的第一帧图像，基于所述第一帧图像对应的所述相机位姿
、
所述相机配置信息，以及轨迹点，确定所述第一帧图像中每个像素在所述参考坐标系下的方位向量，包括：对于所述多帧图像中的第一帧图像，基于所述第一帧图像对应的相机位姿和轨迹点，确定所述第一帧图像对应的坐标系转换参数；基于所述第一帧图像对应的相机配置信息，确定所述第一帧图像中每个像素在其所属的相机坐标系下的方位向量；基于所述第一帧图像对应的坐标系转换参数，对所述第一帧图像中的每个像素在其所属的相机坐标系下的方位向量进行坐标转换，得到所述第一帧图像中的每个像素在所述参考坐标系下的方位向量
。5.
根据权利要求3所述的方法，其特征在于，所述基于所述预测色彩值
、
所述预测语义类别
、
所述交点对应的像素在其所属图像中的真实色彩值和真实语义类别，确定第一损失值，包括：基于所述预测色彩值
、...

【专利技术属性】
技术研发人员：胡兰，张如高，虞正华，
申请(专利权)人：魔视智能科技武汉有限公司，
类型：发明
国别省市：