一种联合空间特征和光谱特征的点云分类方法技术

本发明专利技术涉及一种联合空间特征和光谱特征的点云分类方法，具体包括，对点云卷积的卷积核和卷积运算进行定义；进行点云卷积和池化操作；建立空间和光谱特征联合的点云分类模型；对高光谱激光雷达点云数据进行分类模型的训练；利用点云数据分类模型对高光谱激光雷达的点云数据进行分类。本发明专利技术对高光谱激光雷达获取的空间和光谱信息进行联合处理和特征提取，开展空谱特征融合的点云分类研究，提出了联合空间和光谱特征的点云分类模型，进一步提高激光雷达点云分类精度。光雷达点云分类精度。光雷达点云分类精度。

【技术实现步骤摘要】
一种联合空间特征和光谱特征的点云分类方法


[0001]本专利技术属于高光谱激光雷达领域，尤其涉及一种联合空间特征和光谱特征的点云分类方法。

技术介绍

[0002]激光雷达(LiDAR)作为一种主动式探测的现代光学遥感技术，结合了传统雷达技术与现代激光技术，成为对地观测领域的新技术发展方向。激光雷达点云分类是获取激光雷达点云数据中每个点的语义标签，实现对场景的结构信息、物品功能等语义属性信息的描述和分析。精确的激光雷达点云分类是进行复杂室内外视觉解译和场景理解的工作基础。
[0003]目前，国内外激光雷达数据点云分类的研究热点，主要在获得高密度和高精度的三维点云数据基础上，通过计算点云的距离变化、法向变化、曲率变化、高程差异、密度大小、拓扑关系等几何量，实现点云的分类与特征提取。通常激光雷达获取的点云数据量非常大，利用几何信息进行点云分类与特征提取计算量大、效率低、精度不高，并且当几何差异较小时，一些算法无法得到准确的结果。另外，传统的激光雷达系统一般为单波长，在目标属性信息获取方面受到了单一波长的限制，激光后向散射强度数据中的光谱信息相对不足，导致其对地物类别的探测能力有限。融合被动光学的高光谱遥感数据与激光雷达数据可以弥补激光雷达光谱信息不足的缺陷，能够有效地提高地物目标识别与分类精度。但是，融合不同传感器数据进行联合解译面临的最大挑战是精确地配准不同类型数据到同一空间坐标系，同时高光谱成像会受到被动光源光照条件的约束。
[0004]高光谱激光雷达作为近年来一种新型遥感探测手段，可以突破自然光照条件的限制，兼具高空间探测能力与地物物理属性探测能力，除了获取目标表面三维点云几何信息之外，还可以同时获得地物的光谱信息，得到具有高光谱信息的激光雷达点云数据。高光谱激光雷达系统产生与高光谱后向散射强度相结合的点云[x,y,z,I
i
(λ)](i＝1,2,
…
n)，I
i
(λ)表示后向散射强度作为波长λ的连续函数。不同目标表面由于对不同波长的反射率不同，获取的激光强度值存在差异，高光谱激光雷达回波强度表征目标对不同波长激光的反射光谱特性。
[0005]近年来，许多研究人员基于光谱信息对激光雷达的点云分类进行了研究，光谱信息主要来源于未归一化的原始点云强度信息或归一化后的光谱信息。目前高光谱激光雷达的点云分类常用的方法有：支持向量机、决策树、逻辑回归、朴素贝叶斯、随机森林等方法。这些传统的机器学习的方法主要基于人为设计的特征作为分类器的输入进行分类，是浅层分类器的方法。然而，人为设计规则提取的特征表达能力较弱，很难跨越底层点云的光谱数据特征与高层逻辑信息的语义鸿沟，分类精度往往不高。而且特定的分类规则和参数设计对复杂场景的点云适应性差，模型的泛化能力在处理复杂场景时无法达到令人满意的效果。
[0006]近年来，基于深度学习的方法在图像分类和目标识别中等领域取得了一系列突破
性的进展，相比于传统的机器学习方法具有更强的特征学习和特征表达能力。基于深度学习的方法能够通过端到端的学习机制从数据中自动化提取点云特征信息，而不需要人为定义的特征，有效规避传统机器学习方法提取特征时的主观因素带来的影响，从而自适应地提取数据的特征并进行分类，模型泛化能力强。激光雷达的点云数据是海量的，在具有充足有标记训练样本保障的前提下，深度学习网络往往可以取得较好的分类精度。
[0007]激光雷达点云分类是获取激光雷达点云数据中每个点的语义标签，实现对场景的结构信息、物品功能等语义属性信息的描述和分析。精确的激光雷达点云分类是进行视觉解译和场景理解的基础和前提。目前，国内外激光雷达数据点云分类的研究方法主要通过获得高密度和高精度的三维点云数据，通过计算点云的几何变化，实现点云的分类与特征提取。高光谱激光雷达除了获取目标表面三维点云几何信息之外，还可以同时获得地物的光谱信息。

技术实现思路

[0008]为了充分利用高光谱激光雷达高精度三维信息与高分辨率光谱信息获取的优势，本专利技术对高光谱激光雷达获取的空间和光谱信息进行联合处理和特征提取，开展空谱特征融合的点云分类研究，提出了联合空间和光谱特征的点云分类模型，进一步提高激光雷达点云分类精度。
[0009]本专利技术提出了一种联合空间特征和光谱特征的点云分类方法，具体包括以下步骤：
[0010]步骤一，对点云卷积的卷积核和卷积运算的进行定义；
[0011]步骤二，基于空间特征卷积神经网络分支进行点云的卷积运算和池化操作提取空间特征；
[0012]步骤三，基于光谱特征卷积神经网络分支进行光谱维的卷积运算和池化操作提取光谱特征；
[0013]步骤四，建立空间特征和光谱特征联合的点云分类模型。
[0014]进一步，其中，步骤一中，
[0015]一个高光谱激光雷达点产生的点云是一个3D点的集合它包含了点云中总数为M的点，具体描述为如下公式(5)：
[0016][0017]式中：是点云中的第m个点；
[0018]点P
m
的属性f描述了它的空间坐标和光谱反射率信息，表示为如下公式(6)：
[0019]f(P
m
)＝[X
m
,Y
m
,Z
m
,ρ
m
(λ1),ρ
m
(λ2),
…
,ρ
m
(λ
n
)]ꢀꢀꢀ
(6)
[0020]式中，X
m
,Y
m
,Z
m
分别代表点P
m
的三维坐标，ρ
m
(λ
n
)代表点P
m
在波长为λ
n
时的光谱反射率，
[0021]基于H个相邻点来定义P
m
的3D感受野，感受野定义为如下公式(7)：
[0022][0023]式中：代表“任意”，||P
m
‑
P
h
||代表点P
m
和点P
h
的距离，表示基于距离||P
m
‑
P
h
||，点P
m
的H个最近邻域点，最近邻域被描述为{P
h
|h＝1,2,
…
,H}，基于H个最近邻域的
点P
m
的属性表示为
[0024]为了在3D点云中执行卷积运算，将3D卷积核定义为如下公式(8)：
[0025]K
S
＝{k0,k1,
…
,k
S
‑1}
ꢀꢀꢀ
(8)
[0026]式中：S表示卷积核中权重的数量，卷积核的中心坐标为k0＝(0,0,0)，对于卷积核中的每个核点k，深度学习过程中的权重的维度与每个点的属性的维度一致，卷积核中每个核点的权重被定义为ω(k...

【技术保护点】

【技术特征摘要】
1.一种联合空间特征和光谱特征的点云分类方法，其特征在于，具体包括以下步骤：步骤一，对点云卷积的卷积核和卷积运算的进行定义；步骤二，基于空间特征卷积神经网络分支进行点云卷积运算和池化操作提取空间特征；步骤三，基于光谱特征卷积神经网络分支进行光谱维卷积运算和池化操作提取光谱特征；步骤四，建立空间特征和光谱特征联合的点云分类模型。2.根据权利要求1所述的一种联合空间特征和光谱特征的点云分类方法，其特征在于，其中，步骤一中，一个高光谱激光雷达点产生的点云是一个3D点的集合它包含了点云中总数为M的点，具体描述为如下公式(5)：式中：是点云中的第m个点；点P
m
的属性f描述了它的空间坐标和光谱反射率信息，表示为如下公式(6)：f(P
m
)＝[X
m
，Y
m
，Z
m
，ρ
m
(λ1)，ρ
m
(λ2)，
…
，ρ
n
(λ
n
)]
ꢀꢀꢀꢀ
(6)式中，X
m
,Y
m
,Z
m
分别代表点P
m
的三维坐标，ρ
m
(λ
n
)代表点P
m
在波长为λ
n
时的光谱反射率，基于H个相邻点来定义P
m
的3D感受野，感受野定义为如下公式(7)：式中：代表“任意”，||P
m
‑
P
h
||代表点P
m
和点P
h
的距离；表示基于距离||P
m
‑
P
h
||，点P
m
的H个最近邻域点，最近邻域被描述为{P
h
|h＝1,2,
…
,H}，基于H个最近邻域的点P
m
的属性表示为为了在3D点云中执行卷积运算，将3D卷积核定义为如下公式(8)：K
S
＝{k0，k1，
…
，k
S
‑1}
ꢀꢀꢀꢀ
(8)式中：S表示卷积核中权重的数量，卷积核的中心坐标为k0＝(0...

【专利技术属性】
技术研发人员：田汶鑫，陈育伟，李子扬，邱实，吴昊昊，陈林生，唐伶俐，蒋长辉，胡佩纶，
申请(专利权)人：中国科学院空天信息创新研究院，
类型：发明
国别省市：