基于多维光学信息融合的成像方法、装置、设备及介质制造方法及图纸

本发明专利技术涉及图像处理技术领域，尤其涉及一种基于多维光学信息融合的成像方法、装置、设备及介质。该方法对获取的主形图像和衍支图像进行像素链提取，计算主形图像像素链集合中第一像素链的第一特征描述矩阵和衍支图像像素链集合中第二像素链的第二特征描述矩阵，从主形图像像素链集合中确定与一第二像素链距离最近的W个第一像素链，根据特征描述矩阵计算得到W个变换矩阵及其置信度，当所有置信度满足预设条件时，将第二像素链作为融合像素链，添加至主形图像，得到融合图像，以主形图像和衍支图像进行融合，使融合图像包含丰富的细节信息，采用像素链的特征描述矩阵计算变换矩阵，提高图像融合的精准程度，提高了成像质量。提高了成像质量。提高了成像质量。

【技术实现步骤摘要】
基于多维光学信息融合的成像方法、装置、设备及介质


[0001]本专利技术涉及图像处理
，尤其涉及一种基于多维光学信息融合的成像方法、装置、设备及介质。

技术介绍

[0002]由于机器视觉技术非接触、应用灵活等优势，目前，工业场景下广泛采用机器视觉技术进行目标定位、检测、测量等任务。但机器视觉技术的任务能力与所采集图像的信息丰富程度息息相关，而现有采集图像的成像方法通常基于单一固定光照条件进行成像，因而导致大部分机器视觉应用被限制在功能简单、容错率高的工业场景。
[0003]在高端复杂应用场景下，例如半导体制造检测场景等，由于视觉任务繁多，单次图像处理可能需要完成多种视觉任务。但单一固定光照条件的成像结果所包含的信息比较片面，样品的部分工艺特征可能在当前的单一光照条件下无法体现，从而导致部分视觉任务难以完成。另一方面，复杂应用场景对精度、准确率等指标要求也比较高，而当随机噪声较大时，单一光照条件难以保证足够稳定的全局成像质量较差，样品的关键特征可能被噪声掩盖，视觉处理的指标可靠性也就难以保证。因此，如何提高成像质量成为亟待解决的问题本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于多维光学信息融合的成像方法，其特征在于，所述成像方法包括：获取主形图像和衍支图像，对所述主形图像和所述衍支图像分别进行像素链提取，得到主形图像像素链集合和衍支图像像素链集合；根据像素链内像素点的坐标，对所述主形图像像素链集合中的每个第一像素链进行特征描述，得到对应第一像素链的第一特征描述矩阵，对所述衍支图像像素链集合中的每个第二像素链进行特征描述，得到对应第二像素链的第二特征描述矩阵；针对任一个第二像素链，计算所述第二像素链的质心坐标点，将所述质心坐标点映射为所述主形图像中的参考坐标点，从所述主形图像像素链集合中确定与所述参考坐标点距离最近的W个第一像素链，W为大于零的整数；根据所述对应第一像素链的第一特征描述矩阵和所述对应第二像素链的第二特征描述矩阵，通过矩阵变换分别计算得到W个变换矩阵；遍历每个变换矩阵，将所述第二像素链中的像素点按照所述变换矩阵进行映射变换，将变换得到的映射像素点和对应所述变换矩阵的第一像素链中的像素点进行比对，根据比对结果得到所述变换矩阵的置信度，当所有置信度中的最大值大于预设阈值时，将所述第二像素链作为融合像素链，遍历所有第二像素链，得到至少一个融合像素链；将所有融合像素链添加至所述主形图像，得到融合图像。2.根据权利要求1所述的成像方法，其特征在于，所述对所述主形图像和所述衍支图像分别进行像素链提取，得到主形图像像素链集合和衍支图像像素链集合包括：对所述主形图像进行二值化处理，对得到的二值化主形图像进行连通域分割，将分割得到的所有连通域中小于预设面积的连通域筛除，对保留的至少一个连通域进行细化处理，确定细化处理结果为所述主形图像像素链集合；针对任一衍支图像，对所述衍支图像进行二值化处理，对得到的对应所述衍支图像的二值化衍支图像进行连通域分割，将分割得到的所有连通域中小于预设面积的连通域筛除，对保留的至少一个连通域进行细化处理，确定细化处理结果为所述衍支图像对应的衍支图像像素链集合，遍历所有衍支图像，得到对应衍支图像的衍支图像像素链集合。3.根据权利要求1所述的成像方法，其特征在于，所述成像方法还包括：对所述主形图像进行特征点提取，从提取到的所有特征点中筛选出不共线的Q个特征点，Q为大于零的整数；对所有衍支图像分别进行特征点提取，得到对应衍支图像的衍支特征点集合；遍历每张衍支图像，在所述衍支图像对应的衍支特征点集合中确定和所述Q个特征点匹配的Q个匹配点，根据所述Q个匹配点建立衍支坐标系，得到对应衍支图像的衍支坐标系；相应地，对所述衍支图像像素链集合中的每个第二像素链进行特征描述，得到对应第二像素链的第二特征描述矩阵包括：针对每个第二像素链，根据所述第二像素链所属的衍支图像对应的衍支坐标系，对所述第二像素链进行特征描述，确定所述第二像素链对应的第二特征描述矩阵，遍历所有第二像素链，得到对应第二像素链的第二特征描述矩阵。4.根据权利要求3所述的成像方法，其特征在于，所述根据所述第二像素链对应的衍支坐标系，对所述第二像素链进行特征描述，确定所述第二像素链对应的第二特征描述矩阵包括：
根据所述第二像素链所属的衍支图像对应的衍支坐标系，确定所述第二像素链中每个像素点在所述衍支坐标系下的第一坐标信息，确定所述第二像素链中每个像素点在所述衍支坐标系对应的极坐标系下的第二坐标信息；针对所述第二像素链中的任一像素点，计算所述像素点的曲率，确定所述曲率、对应所述像素点的第一坐标信息和第二坐标信息组成所述像素点的属性向量；遍历所述第二像素链中的每一个像素点，将得...

【专利技术属性】
技术研发人员：何良雨，刘彤，张文刚，梅能华，
申请(专利权)人：锋睿领创珠海科技有限公司，
类型：发明
国别省市：