交通标牌的匹配方法及装置制造方法及图纸

本发明专利技术公开了一种交通标牌的匹配方法及装置。该方法包括：从道路图像中获取至少一个交通标牌图像区域；从点云数据中获取至少一个交通标牌超素体；将交通标牌超素体中至少一个空间点投影到所述至少一个交通标牌图像区域中，确定与所述交通标牌超素体匹配的交通标牌图像区域。本发明专利技术能够由机器从道路图像中获取至少一个交通标牌图像区域，然后从点云数据中获取至少一个交通标牌超素体；最后，将交通标牌超素体中至少一个空间点投影到所述至少一个交通标牌图像区域中，确定与所述交通标牌超素体匹配的交通标牌图像区域。本发明专利技术由机器对道路图像中交通标牌区域和交通标牌超素体进行匹配，提高匹配效率。

【技术实现步骤摘要】

本专利技术实施例涉及点云数据处理技术，尤其涉及一种交通标牌的匹配方法及装置。
技术介绍
三维高精地图被工业界和学术界公认为下一代数字地图的主要发展方向，是实现汽车自动驾驶和辅助驾驶的前提条件，为自动驾驶汽车进行精确定位和正确决策提供主要依据。三维高精地图的一个重要环节为建立道路图像与交通标牌点云数据之间的映射关系，其中，交通标牌点云数据为逆向工程中通过测量仪器得到的交通标牌外观表面的点数据集合。现有技术在建立道路图像与点云数据之间的映射关系时，首先由工程师人工的从点云数据中查找出形状与交通标牌类似的空间点集合，然后将该空间点集合投影到道路图像中，最后由工程师人工的判断该空间点集合是否与道路图像中的交通标牌区域相匹配，如果匹配则建立道路图像中的交通标牌区域的映射关系。然而，由于每个路段由许多的单帧点云组合而成，而对于每个单帧点云均需要人工进行图像与点云数据的匹配，因此仅凭借工程师进行图像与点云数据的人工映射，匹配效率低。随着点云数据帧的帧数的增多，人工匹配效率低的缺陷将越发凸显。
技术实现思路
本专利技术提供一种交通标牌的匹配方法及装置，以实现通过机器对道路图像中交通标牌区域和点云数据进行匹配，提高匹配效率。第一方面，本专利技术实施例提供了一种交通标牌的匹配方法，包括：从道路图像中获取至少一个交通标牌图像区域；从点云数据中获取至少一个交通标牌超素体；将交通标牌超素体中至少一个空间点投影到所述至少一个交通标牌图像区域中，确定与所述交通标牌超素体匹配的交通标牌图像区域。第二方面，本专利技术实施例还提供了一种交通标牌的匹配装置，包括：图像区域获取单元，用于从道路图像中获取至少一个交通标牌图像区域；超素体获取单元，用于从点云数据中获取至少一个交通标牌超素体；匹配单元，用于将所述超素体获取单元得到的交通标牌超素体中至少一个空间点投影到所述至少一个交通标牌图像区域中，确定与所述交通标牌超素体匹配的交通标牌图像区域。本专利技术能够由机器从道路图像中获取至少一个交通标牌图像区域，然后从点云数据中获取至少一个交通标牌超素体；最后，将交通标牌超素体中至少一个空间点投影到所述至少一个交通标牌图像区域中，确定与所述交通标牌超素体匹配的交通标牌图像区域。现有技术中需要由工程师人工的从点云数据中查找交通标牌对应的素体，并由人工判断该素体是否与道路图像匹配，匹配效率低。本专利技术能够由机器对道路图像中交通标牌区域和交通标牌超素体进行匹配，提高匹配效率。附图说明图1为本专利技术实施例一中的交通标牌的匹配方法的流程图；图2是本专利技术实施例二中的交通标牌的匹配方法的流程图；图3是本专利技术实施例三中的交通标牌的匹配方法的流程图；图4是本专利技术实施例四中的交通标牌的匹配方法的流程图；图5是本专利技术实施例五中的交通标牌的匹配装置的结构示意图。具体实施方式下面结合附图和实施例对本专利技术作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本专利技术，而非对本专利技术的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本专利技术相关的部分而非全部结构。实施例一图1为本专利技术实施例一提供的交通标牌的匹配方法的流程图，本实施例可适用于道路点云数据与道路图像进行匹配的情况，该方法可以由用于进行道路点云数据与道路图像进行匹配的终端来执行，该终端可以为服务器、个人电脑、笔记本电脑、平板电脑、汽车中控台、智能手机或智能可穿戴设备等，该方法包括：S110、从道路图像中获取至少一个交通标牌图像区域。道路图像可通过拍照设备对道路进行拍照获得。道路图像可以为彩色图像，也可为灰度图像。通过对道路图像进行图像识别，从道路图像中查找到交通标牌图像区域。识别时，可按照交通标牌的形状特点和颜色特点进行查找。例如将具有蓝色的矩形闭合区域确定为交通标牌图像区域。S120、从点云数据中获取至少一个交通标牌超素体。其中，交通标牌超素体包括交通标牌素体和所述交通标牌素体中每个空间点的属性信息。点云数据由N个有向点组成，N为大于等于1的整数。可选的，在S110中进行拍摄的位置点设置点云获取设备，得到道路的点云数据。素体为多个空间点形成的空间体。如果某素体中每个空间点附带有属性信息，则该素体称为超素体。属性信息如颜色参数、放射率等。交通标牌素体为多个空间点组成的具有交通标牌形状的素体。可使用预先生成的交通标牌超素体样本对点云数据进行扫描，找到与该样本相符的超素体。S130、将交通标牌超素体中至少一个空间点投影到至少一个交通标牌图像区域中，确定与交通标牌超素体匹配的交通标牌图像区域。对于任意一个交通标牌超素体，可以将该交通标牌超素体中的全部空间点投影到至少一个交通标牌图像区域中，也可将交通标牌超素体中一个或部分空间点投影到至少一个交通标牌图像区域中。投影的空间点越多，计算量越高，投影越全面。可选的，将交通标牌超素体中预设比例的空间点投影到至少一个交通标牌图像区域中，预设比例为20-80％，优选为50％或60％。如果交通标牌超素体中预设比例的空间点均在交通标牌图像中，则确定交通团中存在交通标牌点云。对每个交通标牌超速点均判断其是否与道路图片中的道路标牌区域匹配，如果匹配则建立交通标牌超素体和交通标牌区域的对应关系。本实施例能够由机器从道路图像中获取至少一个交通标牌图像区域，然后从点云数据中获取至少一个交通标牌超素体；最后，将交通标牌超素体中至少一个空间点投影到所述至少一个交通标牌图像区域中，确定与所述交通标牌超素体匹配的交通标牌图像区域。现有技术中需要由工程师人工的从点云数据中查找交通标牌对应的素体，并由人工判断该素体是否与道路图像匹配，匹配效率低。本实施例由机器对道路图像中交通标牌区域和交通标牌超素体进行匹配，提高匹配效率。实施例二图2为本专利技术实施例二提供的交通标牌的匹配方法的流程图，其中，S110、从道路图像中获取至少一个交通标牌图像区域，可是通过下述方式实施：S110＇、根据最稳定极值区域(MaximallyStableExtremalRegions，MSER)特征检测器从道路图像中获取至少一个交通标牌图像区域。MSER特征检测器用于查找当使用不同的灰度阈值对图像进行二值化时，图像中最稳定的区域。MSER提取过程为：首先，使用一系列灰度阈值对图像进行二值化处理；然后，对于每个阈值得到的二值图像，得到相应的黑色区域与白色区域；最后，提取在比较宽的灰度本文档来自技高网...

【技术保护点】
一种交通标牌的匹配方法，其特征在于，包括：从道路图像中获取至少一个交通标牌图像区域；从点云数据中获取至少一个交通标牌超素体；将交通标牌超素体中至少一个空间点投影到所述至少一个交通标牌图像区域中，确定与所述交通标牌超素体匹配的交通标牌图像区域。

【技术特征摘要】
1.一种交通标牌的匹配方法，其特征在于，包括：
从道路图像中获取至少一个交通标牌图像区域；
从点云数据中获取至少一个交通标牌超素体；
将交通标牌超素体中至少一个空间点投影到所述至少一个交通标牌图像区
域中，确定与所述交通标牌超素体匹配的交通标牌图像区域。
2.根据权利要求1所述的交通标牌的匹配方法，其特征在于，所述从道路
图像中获取至少一个交通标牌图像区域，包括：
根据最稳定极值区域特征检测器从所述道路图像中获取至少一个交通标牌
图像区域。
3.根据权利要求1所述的交通标牌的匹配方法，其特征在于，在从道路图
像中获取至少一个交通标牌图像区域之后，还包括：
获取交通标牌图像区域的特征向量；
将至少一个交通标牌图像区域的特征向量代入到预设神经网络模型中进行
筛选，得到符合交通标牌的标准特征向量的交通标牌图像区域。
4.根据权利要求1至3中任一项所述的交通标牌的匹配方法，其特征在于，
在从道路图像中获取至少一个交通标牌图像区域之后，还包括：
根据聚类算法将具有重叠区域的多个交通标牌图像区域进行合并。
5.根据权利要求1至3中任一项所述的交通标牌的匹配方法，其特征在于，
在从道路图像中获取至少一个交通标牌图像区域之后，还包括：
根据交通标牌的矩特征对获取的少一个交通标牌图像区域进行筛选。
6.根据权利要求3所述的交通标牌的匹配方法，其特征在于，所述获取交
通标牌图像区域的特征向量，包括：
提取交通标牌图像区域对应的下述至少两个颜色特征：
交通标牌图像区域的红绿蓝RGB多通道特征、经色度饱和度纯度HSV模
型转换得到的色度饱和度纯度HSV图像、经亮度色度YCrCb模型转换得到的
亮度色度YCrCb图像；
将提取的所述至少两个颜色特征进行融合，得到融合后的所述交通标牌图
像区域的特征向量。
7.根据权利要求3所述的交通标牌的匹配方法，其特征在于，在获取交通
标牌图像区域的特征向量之前，还包括：
对交通标牌图像区域进行尺度归一化；
相应的，所述获取交通标牌图像区域的特征向量，包括：
获取尺度归一化的交通标牌图像区域的特征向量。
8.根据权利要求1所述的交通标牌的匹配方法，其特征在于，所述从点云
数据中获取至少一个交通标牌超素体，包括：
根据反射率和平面特征提取交通标牌对应的空间点集合；
根据所述空间点集合构造交通标牌超素体集合；
对所述交通标牌超素体集合进行分割，得到至少一个交通标牌超素体。
9.根据权利要求8所述的交通标牌的匹配方法，其特征在于，在根据点云
集合构造交通标牌超素体集合之后，还包括：
对所述交通标牌超素体集合中的空间点进行高斯滤波。
10.根据权利要求8所述的交通标牌的匹配方法，其特征在于，在对所述
交通标牌超素体集合进行分割，得到至少一个交通标牌超素体之后，还包括：
使用预设转动惯量或预设旋转图像对所述至少一个交通标牌超素体进行筛

\t选。
11.根据权利要求1所述的交通标牌的匹配方法，其特征在于，所述将交
通标牌超素体中至少一个空间点投影到所述至少一个交通...

【专利技术属性】
技术研发人员：姜雨，何贝，蒋昭炎，宋良，
申请(专利权)人：百度在线网络技术北京有限公司，
类型：发明
国别省市：北京;11