基于多视图阴影分割的光栅三维重建系统及方法技术方案

本发明专利技术公开了基于多视图阴影分割的光栅三维重建系统及方法，属于光学三维重建领域。本发明专利技术提出了多尺度自注意力分割网络结构，着重使用自注意力机制，引入多尺度结构，精确快速地完成阴影分割；本发明专利技术的多视图阴影分割三维重建方法，可以实现高精度相位数据的融合，解决了现有光栅投影三维重建方法中阴影对于重建结果的影响。相比于现有方案，本发明专利技术抑制干扰能力强、精度高，可以准确识别阴影区域，并去除由于阴影导致的相位噪声，生成高精度的多视图融合相位，能够满足工厂对于PCB部分三维缺陷检测的精度要求，对提高生产的自动化水平起到了一定帮助作用。起到了一定帮助作用。起到了一定帮助作用。

【技术实现步骤摘要】
基于多视图阴影分割的光栅三维重建系统及方法


[0001]本专利技术涉及基于多视图阴影分割的光栅三维重建系统及方法，属于光学三维重建领域。

技术介绍

[0002]结构光测量技术作为一种主动式光学测量方法，通过光栅投射编码条纹，获得经待测物表面高度调制而发生形变的结构光图像，从而解算出三维形貌数据，在逆向工程、数字化建模、计算测量等领域研究广泛。但对于形貌复杂对象，单视角测量面临因高度和光栅投射角度共同导致的阴影问题，无法精确获得待测物完整三维信息，因此基于多视图角进行三维重建才是正确解决方案。
[0003]目前光栅投影三维重建方法众多。1983年由日本学者Takeda提出傅里叶轮廓术(Mitsuo Takeda,Kazuhiro Mutoh.Fourier transform profilometry for the automatic measurement of 3
‑
Dobject shapes[J].Applied Optics,1983,Vol.22:3977
‑
3982.)于，他首先将傅里叶本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于多视角阴影分割的光栅三维重建系统，其特征在于，所述系统包括：光栅投影模块、图像采集模块、阴影分割模块和光栅三维重建模块；所述光栅投影模块包括多个光栅投影仪，所述光栅投影仪将光栅条纹投射到待测物体表面；所述图像采集模块用于采集待测物体表面的光栅图像，并将所述光栅图像输入所述阴影分割模块；所述阴影分割模块采用MobileViT多尺度自注意力分割网络，获取各视角光栅图像的阴影掩膜；所述光栅三维重建模块通过相移轮廓术与多频外差法，结合所述阴影掩膜获得各视角的绝对相位图；然后通过求解相位高斯权重完成融合得到高精度绝对相位图，并根据系统标定参数计算完整点云数据。2.根据权利要求1所述的基于多视角阴影分割的光栅三维重建系统，其特征在于，所述MobileViT多尺度自注意力分割网络包括：编码器部分和解码器部分；所述编码器部分的降采样过程包括：首先，输入的光栅图像张量先进入网络stem茎部分，得到1/2降采样的特征图；接着继续通过两个MobileNet模块，这个过程中通过改变卷积步长进行特征图降采样，得到1/4降采样的特征图；此时网络出现并联结构，形成降采样支路和降采样主路；所述1/4降采样的特征图通过降采样支路传入所述解码器部分，用于给解码过程提供轮廓边界信息；另一方面继续通过所述降采样主路上的多个串联的MobileNet模块提取特征并实现1/8降采样；后续每一次降采样均使用所述并联结构，将降采样特征图通过所述降采样支路进入解码器部分，同时通过所述降采样主路的MobileViT模块，提取兼顾局部特征信息和全局注意力的降采样特征图，直至得到所要求的降采样结果，输入所述解码器部分；所述解码器部分用于将所述编码器部分提取的深层语义特征信息在空间尺度上还原回原输入分辨率，所述解码器部分在上采样的过程中结合所述编码器部分的降采样支路输出的不同尺度的特征图进行还原。3.根据权利要求2所述的基于多视角阴影分割的光栅三维重建系统，其特征在于，所述降采样支路上还包括：高效空洞金字塔注意力分割模块；所述高效空洞金字塔注意力分割模块的处理特征图的过程包括：首先经过分离拼接操作，使用DeepLabV2网络中不同扩张率的空洞卷积及池化操作，对特征图分离出的不同子通道进行卷积池化，在不改变卷积核参数量的同时观察不同感受野以获得多尺度特征图信息；接着，为增加子通道间的特征信息交流，防止单一特征的过渡学习，将特征图进行ShuffleNet中的通道混合Channel Shuffle操作；然后使用SE模块提取多尺度特征图中不同子通道的注意力权重。4.根据权利要求1所述的基于多视角阴影分割的光...

【专利技术属性】
技术研发人员：华晓东，祁云峰，吴静静，余锦淼，
申请(专利权)人：江苏聚目科技有限公司，
类型：发明
国别省市：