一种基于点云和RGB图像融合的工业缺陷检测方法技术

本发明专利技术提供一种基于点云和RGB图像融合的工业缺陷检测方法，属于工业缺陷检测领域，所述3D点云和RGB图像特征融合的缺陷检测模型主要包括特征融合模块和最终决策模块。通过特征提取模块获取RGB图像特征和3D点云特征，随后利用特征对齐模块将3D点云特征转换为2D平面特征，与RGB图像特征进行初步对齐。特征融合模块采用多层感知器和全连接层，促进不同模态特征的信息对应，提高缺陷检测性能。最终决策模块采用单分类支持向量机，对缺陷分数和分割图进行决策，以提高检测准确度。该方法有效提高了工业缺陷检测的准确性和鲁棒性，对于提升产品质量和生产效率具有重要意义。

【技术实现步骤摘要】

本公开属于工业缺陷检测领域，特别涉及了一种基于点云和rgb图像融合的工业缺陷检测方法。

技术介绍

1、随着工业生产规模和自动化水平的提高，识别和解决缺陷问题变得越来越重要，对缺陷检测的要求也不断提高。工业上的缺陷问题可能会导致产品质量下降、生产线停工以及设备损坏等问题，因此及早发现并处理缺陷情况对于维护生产的稳定运行至关重要。

2、传统的缺陷检测方法主要基于rgb图像和传感器数据进行分析，然而在面对大规模、复杂的生产环境时，这些传统方法可能表现出局限性。单纯地使用rgb图像可能无法捕捉到物体的三维空间形状，而单独使用点云数据可能无法获取物体表面的视觉信息。因此，将点云和rgb图像进行融合，综合利用它们各自的优势，可以提高工业异常检测的准确性和鲁棒性。点云数据能提供丰富的三维结构信息，rgb图像数据提供了颜色和纹理信息，将这两种数据有效地融合，可以在缺陷检测中实现更高的准确率和更低的漏检率。然而，点云和rgb图像数据融合在实际应用中仍面临一些挑战，包括如何有效地融合两种不同源的信息、如何处理大规模的点云数据、如何有效地提取和利用三维特征信息等。<本文档来自技高网...

【技术保护点】

1.一种基于点云和RGB图像融合的工业缺陷检测方法，其特征在于，包括以下步骤；

2.如权利要求1所述的基于点云和RGB图像融合的工业缺陷检测方法，其特征在于，所述特征提取和对齐包括最远点采样、特征插值和特征投影，用于提取3D点云和RGB图像的特征并进行初步对齐，为两个模态的有效特征融合提供坚实的基础。

3.如权利要求1所述的基于点云和RGB图像融合的工业缺陷检测方法，其特征在于，所述特征融合模块包括多层感知机、全连接层和对比损失，保证相同位置的不同模态特征拥有更多对应信息，而不同位置的特征拥有较少的对应信息，优化了模型融合不同模态特征的能力。</p>

4.如权...

【技术特征摘要】

1.一种基于点云和rgb图像融合的工业缺陷检测方法，其特征在于，包括以下步骤；

2.如权利要求1所述的基于点云和rgb图像融合的工业缺陷检测方法，其特征在于，所述特征提取和对齐包括最远点采样、特征插值和特征投影，用于提取3d点云和rgb图像的特征并进行初步对齐，为两个模态的有效特征融合提供坚实的基础。

3.如权利要求1所述的基于点云和rgb图像融合的工业缺陷检测方法，其特征在于，所述特征融合模块包括多层感知机、全连接层和对比损失，保证相同位置的不同模态特征拥有更多对应信息，而不同位置的特征拥有较少的对应信息，优化了模型融合不同模态特征的能力。

4.如权利要求1所述的基于点云和rgb图像融合的工业缺陷检测方法，其特征在于，所述两个可学...

【专利技术属性】
技术研发人员：韩孟琪，马杰，金煦阳，
申请(专利权)人：河北工业大学，
类型：发明
国别省市：