一种基于计算机视觉的装配过程几何参数自适应测量系统及方法技术方案

本发明专利技术公开了一种基于计算机视觉的装配过程几何参数自适应测量系统，它包括有工艺设计客户端单元、图像采集系统、图像处理系统、追踪系统、可视化系统和服务器。本发明专利技术通过服务器传入的测量指令，相机可以自适应地调整测量位置，精确测量区域并缩小测量范围，实现测量的精确化，减少计算机的计算量，提高测量效率并实现实时检测测量。

【技术实现步骤摘要】
一种基于计算机视觉的装配过程几何参数自适应测量系统及方法
本专利技术涉及图像处理及识别技术自适应测量装配过程中的几何参数，具体为一种基于计算机视觉的装配过程几何参数自适应测量系统及方法。
技术介绍
在工业生产中，传统的形状尺寸检测手段有卡尺、量规、万能工具显微镜、轮廓仪和X射线等，这些检测手段在工业生产中发挥着巨大的作用，但是随着现代工业的发展和进步，特别是在一些高精产业，传统的检测手段已经不能满足生产的需要，卡尺和量规等检测手段虽然简便、快捷，但测量数据较少，精度不高。万能工具显微镜及轮廓仪等检测手段虽然有较高的精度，但要求在特定的设备、特定的环境下进行检测，不但劳动强度大，而且效率低，传统的检测测量技术需要众多的检测工人，不仅影响生产效率，而且带来不可靠因素。而计算机视觉检测测量技术克服了传统检测技术的缺点，它以检测的安全性、可靠性及自动化程度高等优点而得到广泛的应用，成为当今检测技术的研究热点之一。
技术实现思路
本专利技术的目的就是针对上述现有技术的不足，提供一种基于计算机视觉的装配过程几何参数自适应测量系统及方法，该专利技术中的相机可以根据服务器传入的测量指令自适应调整拍摄位置，缩小测量范围，减小不必要的因素干扰，使测量更加精确化，提升测量效率和质量。本专利技术采用的技术方案如下：一种基于计算机视觉的装配过程几何参数自适应测量系统，它包括有工艺设计客户端单元、图像采集系统、图像处理系统、追踪系统、可视化系统和服务器，所述工艺设计客户端单元通过网络将工艺信息输入服务器，所述服务器通过网络将测量指令输入图像采集系统，所述图像采集系统通过网络将需测量部分的图像输入图像处理系统，所述图像处理系统将处理后的测量参数信息输入服务器，所述服务器通过网络将测量后的数据输入可视化系统，所述追踪系统通过网络将测量指令输入图像采集系统，所述图像采集系统通过网络将需测量部分的图像输入图像处理系统，所述图像处理系统将处理后的测量参数信息输入服务器，所述服务器通过网络将测量后的数据输入可视化系统。所述图像采集系统分为软件系统和硬件系统，所述软件系统包括全局图像采集模块、测量指令模块和局部图像采集模块，所述全局图像采集模块通过线路与测量指令模块相连，所述测量指令模块通过线路与局部图像采集模块相连，所述硬件系统包括广角相机、长焦相机和转动云台，所述长焦相机安装在转动云台上。所述图像处理系统包括图像增强噪声处理模块、图像分割特征提取模块、物体识别参数估计模块和测量参数计算模块，所述图像增强噪声处理模块通过数据管道与图像分割特征提取模块相连，所述图像分割特征提取模块通过数据管道与物体识别参数估计模块相连，所述物体识别参数估计模块通过数据管道与测量参数计算模块相连。所述局部图像采集模块通过数据管道与图像增强噪声处理模块相连。所述追踪系统包括眼动追踪模块和手势追踪模块。本专利技术还提供一种基于计算机视觉的装配过程几何参数自适应测量方法，步骤如下：（1）相机安装和调试：广角相机和长焦相机的安装以及双目相机（两个广角相机光轴平行地放置在一起组成的相机对，或者两个长焦相机光轴平行地放置在一起组成的相机对）的标定，用于确定图像像素和实际长度之间的关系，固定广角相机的高度，使广角相机正对下方装配场景，能清晰全面地观测到整个装配过程，在转动云台上固定长焦相机，调整转动云台的位置，使长焦相机正对装配过程关键处需要测量的位置，并能清晰观测到测量区域；（2）服务器测量指令的输入：服务器将测量位置指令输入到图像采集系统，用于确定相机需要测量的位置；（3）测量区域的确定：图像采集系统接收需要测量的数据后，相机自适应地调整测量区域，用于确定测量位置的区域和大小；（4）追踪系统测量指令的输入：追踪系统中将人的交互指定的测量位置指令输入到图像采集系统，用于确定相机需要测量的位置；（5）图像处理与参数的计算：图像处理系统通过图像增强噪声处理、图像分割特征提取及物体识别参数估计完成测量区域的参数的计算；（6）服务器测量参数的输出：服务器接收图像处理系统输出的测量参数信息，并与数据库中工艺信息进行比较，将比较结果分发到可视系统，用于可视化和其他处理。步骤（2）的具体步骤为：（a）工艺设计客户端单元将装配场景和需测量的参数要求数据发送到服务器，其中工艺设计客户端单元包括资源封装模块，场景数据形式化处理模块和工艺数据形式化处理模块；（b）服务器整合装配资源数据包将需测量的参数要求数据发送到测量客户端的图像采集系统；（c）图像采集系统根据需测量的数据确定需要测量的关键参数及测量位置。步骤（3）的具体步骤为：（a）图像采集系统接收到需要测量的数据后，确定了关键参数的测量及测量位置，接着将长焦相机固定，使长焦相机正对测量位置并能清晰观测到测量区域；（b）在广角相机的视野范围内，在零件表面添加二维码，通过识别二维码标志点的方式识别并定位追踪零件，当检测到零件接近测量位置一定邻域内时，相机自适应切换，打开正对测量位置的长焦相机进行测量检测，并通过框选的方式进一步减小测量区域并精确测量。步骤（4）的具体步骤为：（a）眼动追踪确定测量位置和区域；（b）手势追踪确定测量位置和区域。步骤（5）的具体步骤为：（a）在得到测量区域内的图像后，通过图像灰度化处理或高斯滤波处理减小图像的噪声；（b）直线特征的提取；（c）椭圆特征的提取；（d）物体识别；（e）参数的测量和计算；（f）将测量得到的像素参数信息转化为实际距离参数信息输出到服务器。本专利技术的有益效果有：（1）通过在测量场景配置一套基于计算机视觉的感知系统，实现测量场景的全局图像采集，使得操作人员能看到整个测量的场景；（2）通过服务器传入的测量指令，相机可以自适应地调整测量位置，精确测量区域并缩小测量范围，实现测量的精确化，减少计算机的计算量，提高测量效率并实现实时检测测量；（3）通过在测量场景配置一套追踪系统，实现人的状态实时追踪，通过捕捉人的注视点和手势确定测量的位置区域，相机自适应地调整拍摄位置，精确测量区域并缩小测量范围，使得操作人员可以根据测量需要自由的选择测量位置区域；（4）通过在测量场景配置一套图像处理系统，实现测量区域的物体识别和参数计算，并将测量参数信息输出到服务器，服务器再将测量参数分发到其他系统，使得测量参数信息能进行再加工处理。附图说明图1为计算机视觉系统组成示意图；图2为自适应测量系统组成示意图；图3为数据形式化表示示意图。具体实施方式下面结合附图对本专利技术作进一步地说明：实施例：在发动机机匣内安装的量块之间的距离为0.5mm~1mm，采用计算机视觉的装配过程几何参数自适应测量系统，指导工人进行安装，使发动机机匣内量块安装符合装配工艺要求，接着按以下步骤运行：（1）相机安装和调试：广角相机和长焦相机的安装以及双目相机的标定，用于确定图像像素和实际长度之间的关系，固定广角相机的高度，使广角本文档来自技高网...

【技术保护点】
1.一种基于计算机视觉的装配过程几何参数自适应测量系统，其特征是它包括有工艺设计客户端单元、图像采集系统、图像处理系统、追踪系统、可视化系统和服务器，所述工艺设计客户端单元通过网络将工艺信息输入服务器，所述服务器通过网络将测量指令输入图像采集系统，所述图像采集系统通过网络将需测量部分的图像输入图像处理系统，所述图像处理系统将处理后的测量参数信息输入服务器，所述服务器通过网络将测量后的数据输入可视化系统，所述追踪系统通过网络将测量指令输入图像采集系统，所述图像采集系统通过网络将需测量部分的图像输入图像处理系统，所述图像处理系统将处理后的测量参数信息输入服务器，所述服务器通过网络将测量后的数据输入可视化系统。/n

【技术特征摘要】
20191029 CN 20191104010631.一种基于计算机视觉的装配过程几何参数自适应测量系统，其特征是它包括有工艺设计客户端单元、图像采集系统、图像处理系统、追踪系统、可视化系统和服务器，所述工艺设计客户端单元通过网络将工艺信息输入服务器，所述服务器通过网络将测量指令输入图像采集系统，所述图像采集系统通过网络将需测量部分的图像输入图像处理系统，所述图像处理系统将处理后的测量参数信息输入服务器，所述服务器通过网络将测量后的数据输入可视化系统，所述追踪系统通过网络将测量指令输入图像采集系统，所述图像采集系统通过网络将需测量部分的图像输入图像处理系统，所述图像处理系统将处理后的测量参数信息输入服务器，所述服务器通过网络将测量后的数据输入可视化系统。


2.根据权利要求1所述的基于计算机视觉的装配过程几何参数自适应测量系统，其特征是所述图像采集系统分为软件系统和硬件系统，所述软件系统包括全局图像采集模块、测量指令模块和局部图像采集模块，所述全局图像采集模块通过线路与测量指令模块相连，所述测量指令模块通过线路与局部图像采集模块相连，所述硬件系统包括广角相机、长焦相机和转动云台，所述长焦相机安装在转动云台上。


3.根据权利要求1所述的基于计算机视觉的装配过程几何参数自适应测量系统，其特征是所述图像处理系统包括图像增强噪声处理模块、图像分割特征提取模块、物体识别参数估计模块和测量参数计算模块，所述图像增强噪声处理模块通过数据管道与图像分割特征提取模块相连，所述图像分割特征提取模块通过数据管道与物体识别参数估计模块相连，所述物体识别参数估计模块通过数据管道与测量参数计算模块相连。


4.根据权利要求2所述的基于计算机视觉的装配过程几何参数自适应测量系统，其特征是所述局部图像采集模块通过数据管道与图像增强噪声处理模块相连。


5.根据权利要求1所述的基于计算机视觉的装配过程几何参数自适应测量系统，其特征是所述追踪系统包括眼动追踪模块和手势追踪模块。


6.一种基于计算机视觉的装配过程几何参数自适应测量方法，其特征是，步骤如下：
（1）相机安装和调试：广角相机和长焦相机的安装以及双目相机的标定，用于确定图像像素和实际长度之间的关系，固定广角相机的高度，使广角相机正对下方装配场景，能清晰全面地观测到整个装配过程，在转动云台上固定长焦相机，调整转动云...

【专利技术属性】
技术研发人员：晏玉祥，邵立，白晓亮，常壮，
申请(专利权)人：南京翱翔信息物理融合创新研究院有限公司，
类型：发明
国别省市：江苏;32