一种展厅视觉交互增强的视频图像处理方法技术

本申请涉及图像处理领域，提供一种展厅视觉交互增强的视频图像处理方法，包括：获取AR程序中的待处理图像，确定所述待处理图像中的现实区域和虚拟区域；基于所述虚拟区域中像素点的特征确定第一尺度参数；利用单尺度算法基于所述第一尺度参数对所述虚拟区域中的像素点进行处理，以及利用单尺度算法基于第二尺度参数对所述现实区域中的像素点进行处理；其中，所述第二尺度参数为所述单尺度算法中的原始尺度参数。该方法基于虚拟区域中的像素点的特征确定虚拟区域对应的尺度参数，对虚拟区域中的像素点进行准确的增强，能够获得质量更高的视觉图像。的视觉图像。的视觉图像。

【技术实现步骤摘要】
一种展厅视觉交互增强的视频图像处理方法


[0001]本申请涉及图像处理领域，特别是涉及一种展厅视觉交互增强的视频图像处理方法。

技术介绍

[0002]随着数字技术的飞速发展，视觉交互技术得到了广泛的应用。增强现实（AR）技术为视觉交互注入了新的活力。AR技术可以将虚拟图像与现实环境之间融合，可以给人们带来身临其境的感觉，迎合了人们对沉浸式体验的追求。而展厅视觉交互在图像处理、视觉增强等技术的推动下，已经发展成为了强调体验和交互的新领域。通过结合AR技术，可以极大扩展展厅的表达手段和体验潜力，人们可以通过电子设备，亲眼目睹现实和虚拟的结合。
[0003]在AR现实虚拟交互时，图像增强是一种非常有益的算法，其不仅可以增强虚拟交互的质量、还可以提取和增强AR系统中需要检测和跟踪的现实世界中的特征点或者是图像标记，以便将虚拟元素准确的叠加到场景中，还可以帮助提高目标检测识别的准确性和效率。
[0004]当虚拟物体是半透明的时候，意味着用户能够透过它们看到真实世界的背景或其他对象。在此场景下往往都会对现实背景进行虚化，导致真实场景模糊。传统的图像增强算法通常是针对不透明的物体所设计，对半透明虚拟物体的处理不准确，很容易产生透明度失真和边缘模糊等缺点，导致被半透明虚拟区域所遮掩的现实区域模糊，造成部分信息丢失，这可能影响用户对现实场景的感知和理解。因此需要对其进行优化，以提高虚拟物体在现实中的真实性和可见性。

技术实现思路

[0005]本专利技术提供一种展厅视觉交互增强的视频图像处理方法，该方法基于虚拟区域中的像素点的特征确定虚拟区域对应的尺度参数，对虚拟区域中的像素点进行准确的增强，能够获得质量更高的视觉图像。
[0006]第一方面，本申请提供一种展厅视觉交互增强的视频图像处理方法，包括：获取AR程序中的待处理图像，确定所述待处理图像中的现实区域和虚拟区域；基于所述虚拟区域中像素点的特征确定第一尺度参数；利用单尺度算法基于所述第一尺度参数对所述虚拟区域中的像素点进行处理，以及利用单尺度算法基于第二尺度参数对所述现实区域中的像素点进行处理；其中，所述第二尺度参数为所述单尺度算法中的原始尺度参数。
[0007]在一可选实施例中，基于所述虚拟区域中像素点的特征确定第一尺度参数，包括：确定所述虚拟区域中的混合像素点；其中，所述混合像素点为包含虚拟信息和现实信息的像素点；计算每一混合像素点对应的透明程度；计算每一混合像素点对应的边缘影响度；
基于每一混合像素点对应的透明程度和每一混合像素点对应的边缘影响度对单尺度算法中的原始尺度参数进行校正，得到所述第一尺度参数。
[0008]在一可选实施例中，确定所述虚拟区域中的混合像素点，包括：以所述虚拟区域中每一像素点为第一中心像素点构建第一窗口，计算所述第一窗口中每一像素点在R、G 、B三个通道的RGB值；将RGB值频率最高的预设数量的像素点作为代表像素点，基于所述代表像素点的RGB值和所述第一窗口的第一中心像素点的RGB值计算所述第一中心像素点的混合程度，从而计算得到所述虚拟区域中所有像素点的混合程度；将所述虚拟区域中混合程度大于阈值的像素点确定为所述混合像素点。
[0009]在一可选实施例中，计算每一混合像素点对应的透明程度，包括：以所述虚拟区域中像素点的混合程度大于阈值作为生长准则进行区域生长，得到虚拟半透明区域；以所述虚拟半透明区域中的混合像素点为第四中心像素点构建第四窗口，计算所述第四窗口的对比度；利用局部二值模式算法计算所述第四窗口内每一混合像素点的LBP值；基于所述第四窗口的对比度和所述第四窗口内每一混合像素点的LBP值计算得到所述第四窗口内每一混合像素点对应的透明程度，从而得到每一混合像素点对应的透明程度。
[0010]在一可选实施例中，计算所述第四窗口的对比度，包括：计算所述第四窗口内混合像素点在R通道的标准差和平均值的比值，得到R通道对比度；计算所述第四窗口内混合像素点在G通道的标准差和平均值的比值，得到G通道对比度；计算所述第四窗口内混合像素点在B通道的标准差和平均值的比值，得到B通道对比度；基于所述R通道对比度、所述G通道对比度和所述B通道对比度得到所述第四窗口的对比度。
[0011]在一可选实施例中，计算每一混合像素点对应的边缘影响度，包括：确定所述混合像素点组成的混合区域的边缘像素点，得到混合边缘像素点；计算所述混合边缘像素点对所述混合像素点的边缘影响度，从而得到每一混合像素点对应的边缘影响度。
[0012]在一可选实施例中，计算所述混合边缘像素点对所述混合像素点的边缘影响度，包括：以每一混合边缘像素点为第二中心像素点构建第二窗口，计算所述第二窗口内梯度幅值的局部方差，从而得到每一混合边缘像素点对应的第二窗口内梯度幅值的局部方差；以每一混合像素点为第三中心像素点构建第三窗口，所述第三窗口包括混合边缘像素点，且所述混合边缘像素点与所述第三中心像素点距离最近；基于所述第三窗口内第三中心像素点与所述混合边缘像素点之间的欧式距离、所述混合边缘像素点的亮度值、所述第三中心像素点的亮度值以及所述混合边缘像素点对应的第二窗口内梯度幅值的局部方差计算得到混合边缘像素点对所述混合像素点的边缘影响度。
[0013]在一可选实施例中，通过如下公式计算得到混合边缘像素点对所述混合像素点的边缘影响度：；其中，V表示混合边缘像素点对混合像素点的边缘影响度，表示第三窗口内第三中心像素点与混合边缘像素点之间的欧式距离，表示混合边缘像素点的亮度值，表示第三中心像素点的亮度值，表示混合边缘像素点对应的第二窗口内梯度幅值的局部方差，为自然常数。
[0014]在一可选实施例中，通过如下公式对单尺度算法中的原始尺度参数进行校正，得到所述第一尺度参数：；其中，表示第一尺度参数，为归一化函数，为混合像素点对应的透明程度，V表示混合像素点对应的边缘影响度，表示单尺度算法中的原始尺度参数。
[0015]在一可选实施例中，获取AR程序中的待处理图像，确定所述待处理图像中的现实区域和虚拟区域，包括：获取AR程序中的视频流，利用双边滤波算法对视频流中每帧图像进行去噪，从而得到所述待处理图像；利用神经网络算法对所述待处理图像进行处理，以将所述待处理图像分为所述现实区域和所述虚拟区域。
[0016]本申请的有益效果，区别于现有技术，本申请的展厅视觉交互增强的视频图像处理方法，包括：获取AR程序中的待处理图像，确定所述待处理图像中的现实区域和虚拟区域；基于所述虚拟区域中像素点的特征确定第一尺度参数；利用单尺度算法基于所述第一尺度参数对所述虚拟区域中的像素点进行处理，以及利用单尺度算法基于第二尺度参数对所述现实区域中的像素点进行处理；其中，所述第二尺度参数为所述单尺度算法中的原始尺度参数。该方法基于虚拟区域中的像素点的特征确定虚拟区域对应的尺度参数，对虚拟区域中的像素点进行准确的增强，能够获得质量更高的视觉图像。
附图说明
[0017]图1为本专利技术提供的展厅视觉交互增强的视频图像处理方法的第一实施例的流程示意图；图2为图1中本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种展厅视觉交互增强的视频图像处理方法，其特征在于，包括：获取AR程序中的待处理图像，确定所述待处理图像中的现实区域和虚拟区域；基于所述虚拟区域中像素点的特征确定第一尺度参数；利用单尺度算法基于所述第一尺度参数对所述虚拟区域中的像素点进行处理，以及利用单尺度算法基于第二尺度参数对所述现实区域中的像素点进行处理；其中，所述第二尺度参数为所述单尺度算法中的原始尺度参数；基于所述虚拟区域中像素点的特征确定第一尺度参数，包括：确定所述虚拟区域中的混合像素点；其中，所述混合像素点为包含虚拟信息和现实信息的像素点；计算每一混合像素点对应的透明程度；计算每一混合像素点对应的边缘影响度；基于每一混合像素点对应的透明程度和每一混合像素点对应的边缘影响度对单尺度算法中的原始尺度参数进行校正，得到所述第一尺度参数。2.根据权利要求1所述的一种展厅视觉交互增强的视频图像处理方法，其特征在于，确定所述虚拟区域中的混合像素点，包括：以所述虚拟区域中每一像素点为第一中心像素点构建第一窗口，计算所述第一窗口中每一像素点在R、G 、B三个通道的RGB值；将RGB值频率最高的预设数量的像素点作为代表像素点，基于所述代表像素点的RGB值和所述第一窗口的第一中心像素点的RGB值计算所述第一中心像素点的混合程度，从而计算得到所述虚拟区域中所有像素点的混合程度；将所述虚拟区域中混合程度大于阈值的像素点确定为所述混合像素点。3.根据权利要求2所述的一种展厅视觉交互增强的视频图像处理方法，其特征在于，计算每一混合像素点对应的透明程度，包括：以所述虚拟区域中像素点的混合程度大于阈值作为生长准则进行区域生长，得到虚拟半透明区域；以所述虚拟半透明区域中的混合像素点为第四中心像素点构建第四窗口，计算所述第四窗口的对比度；利用局部二值模式算法计算所述第四窗口内每一混合像素点的LBP值；基于所述第四窗口的对比度和所述第四窗口内每一混合像素点的LBP值计算得到所述第四窗口内每一混合像素点对应的透明程度，从而得到每一混合像素点对应的透明程度。4.根据权利要求3所述的一种展厅视觉交互增强的视频图像处理方法，其特征在于，计算所述第四窗口的对比度，包括：计算所述第四窗口内混合像素点在R通道的标准差和平均值的比值，得到R通道对比度；计算所述第四窗口内混合像素点在G通道的标准差和平均值的比值，得到G通道对比度；计算所述第四窗口内混合像素点在B通道的标准差和平均值的比值，得...

【专利技术属性】
技术研发人员：左良，左芸溪，程阿良，周岩，
申请(专利权)人：青岛欧亚丰科技发展有限公司，
类型：发明
国别省市：