减少立体深度传感器成像中的纹理化IR图案制造技术

本公开涉及减少立体深度传感器成像中的纹理化IR图案。讨论了与移除用于深度传感器的红外纹理图案有关的系统、设备和技术。这种技术可以包括将颜色校正变换应用于包括残差红外纹理图案的原始输入图像数据以生成输出图像数据，以使得输出图像数据相对于原始输入图像数据具有减少的IR纹理图案残差。

Reducing Textured IR Patterns in Stereo Depth Sensor Imaging

The present disclosure relates to the reduction of textured IR patterns in stereo depth sensor imaging. Systems, equipment and techniques related to removing infrared texture patterns for depth sensors are discussed. This technique may include applying color correction transformation to the original input image data including residual infrared texture patterns to generate output image data so that the output image data has a reduced IR texture pattern residual relative to the original input image data.

【技术实现步骤摘要】
减少立体深度传感器成像中的纹理化IR图案
本公开一般地涉及减少立体深度传感器成像中的纹理化IR图案。
技术介绍
在计算机视觉和其他成像和计算上下文中，可以基于场景的两个(例如，左和右或参考和目标)二维图像生成深度图像。具体地，在辅助立体或主动立体技术中，将红外(IR)纹理化图案投影到场景上，使得在曝光期间获得的图像包括由场景修改的IR纹理化图案。当场景本身不包括大量纹理(例如，对于空白白色墙壁或类似场景元素)时，这种技术可能是有利的。所获得的包括IR纹理的图像然后被用于使用立体图像匹配技术等来生成深度图像。这种(一个或多个)深度图像可以用于各种上下文中。此外，可能希望获得不包括IR纹理化图案的场景的彩色图像，以用于向用户显示，用于计算机视觉或用于其他目的。用于获得除了包括IR纹理化图案的图像之外的不包括IR纹理化图案的场景的彩色图像的当前技术是昂贵的、功率密集的、降低可用帧速率、和/或倾向于不期望地增加成像设备的尺寸。例如，可以使用单独的成像器来获得除了具有IR纹理的图像之外的没有IR纹理的彩色图像，这可能增加成本、功率使用和设备尺寸。在另一示例中，可以使用时间复用技术以使得开启/关本文档来自技高网...

【技术保护点】
1.一种成像设备，包括：红外(IR)投影仪，将IR纹理图案投影到场景上；图像传感器，基于包括所述IR纹理图案的投影的所述场景的图像捕获来生成原始输入图像数据，其中，所述原始输入图像数据包括来自所述IR纹理图案的IR纹理图案残差；以及图像信号处理器，被耦合到所述图像传感器，所述图像信号处理器接收所述原始输入图像数据，并将颜色校正变换应用于所述原始输入图像数据或对应于所述原始输入图像数据的图像数据以生成输出图像数据，其中，所述颜色校正变换校正所述IR纹理图案残差以使得所述输出图像数据相对于所述原始输入图像数据具有减少的IR纹理图案残差。

【技术特征摘要】
2017.09.21 US 15/711,2501.一种成像设备，包括：红外(IR)投影仪，将IR纹理图案投影到场景上；图像传感器，基于包括所述IR纹理图案的投影的所述场景的图像捕获来生成原始输入图像数据，其中，所述原始输入图像数据包括来自所述IR纹理图案的IR纹理图案残差；以及图像信号处理器，被耦合到所述图像传感器，所述图像信号处理器接收所述原始输入图像数据，并将颜色校正变换应用于所述原始输入图像数据或对应于所述原始输入图像数据的图像数据以生成输出图像数据，其中，所述颜色校正变换校正所述IR纹理图案残差以使得所述输出图像数据相对于所述原始输入图像数据具有减少的IR纹理图案残差。2.根据权利要求1所述的成像设备，其中，所述图像信号处理器还将第二颜色校正变换应用于所述原始输入图像数据或对应于所述原始输入图像数据的所述图像数据以生成IR纹理输出图像数据，其中，所述第二颜色校正变换将所述IR纹理图案残差保留在所述IR纹理输出图像数据内，并且所述输出图像数据相对于所述IR纹理输出图像数据具有减少的IR纹理图案残差。3.根据权利要求2所述的成像设备，其中，所述IR纹理输出图像数据内的多个像素位置包括所述IR纹理图案残差，并且其中，相对于所述IR纹理输出图像数据具有减少的IR纹理图案残差的所述输出图像数据包括在所述IR纹理输出图像数据内的所述多个像素位置处具有第一平均亮度的所述IR纹理输出图像数据、以及在所述输出图像数据内的相同的多个像素位置处具有小于所述第一平均亮度的第二平均亮度的所述输出图像数据。4.根据权利要求2所述的成像设备，其中，所述颜色校正变换在所述图像信号处理器的第一图像处理流水线中实现，并且所述第二颜色校正变换在所述图像信号处理器的第二图像处理流水线中实现。5.根据权利要求2所述的成像设备，还包括：第二图像传感器，基于具有所述IR纹理图案的投影的所述场景的第二图像捕获来生成第二原始输入图像数据，其中，所述第二原始输入图像数据包括来自所述IR纹理图案的第二IR纹理图案残差，并且其中，所述第一图像传感器和所述第二图像传感器相对于所述场景被水平对齐。6.根据权利要求5所述的成像设备，还包括：处理器，被耦合到所述图像信号处理器，所述处理器基于对应于所述原始输入图像数据的所述IR纹理输出图像数据和对应于所述第二原始输入图像数据的第二IR纹理图像数据来生成深度图。7.根据权利要求6所述的成像设备，其中，所述处理器生成所述深度图包括所述处理器基于所述IR纹理图像和所述第二IR纹理图像来执行立体图像匹配。8.根据权利要求5所述的成像设备，其中，所述图像信号处理器还接收所述第二原始输入图像数据，并将所述颜色校正变换应用于所述第二原始输入图像数据或对应于所述第二原始输入图像数据的图像数据以生成第二输出图像数据。9.根据权利要求1所述的成像设备，其中，所述图像信号处理器应用所述颜色校正变换包括：所述图像信号处理器将所述颜色校正变换应用于所述原始输入图像数据或对应于所述原始输入图像数据的图像数据的多个子像素信号以生成所述输出图像数据的相应的单个像素，其中，所述子像素信号包括至少一个红色子像素信号值、至少一个绿色子像素信号值、以及至少一个蓝色子像素信号值。10.根据权利要求9所述的成像设备，其中，所述多个子像素信号包括单个红色子像素信号值、两个绿色子像素信号值和单个蓝色子像素信号值，并且所述输出图像数据的单个像素包括红色像素值、绿色像素值和蓝色像素值。11.根据权利要求1所述的成像设备，其中，所述图像传感器包括其上具有红-绿-蓝滤色器阵列的互补金属氧化物半导体(CMOS)传感器，并且所述图像信号处理器包括专用集成电路(ASIC)。12.一种用于图像处理的方法，包括：接收原始输入图像数据，所述原始输入图像数据包括来自在场景的图像捕获期间被投影在所述场景上的红外(IR)纹理图案的IR纹理图案残差；将颜色校正变换应用于所述原始输入图像数据或对应于所述原始输入图像数据的图像数据以生成输出图像数据，其中，所述颜色校正变换校正所述IR纹理图案残差以使得所述输出图像数据相对于所述原始输入图像数据具有减少的IR纹理图案残差；以及提供所述输出图像数据以用于向用户显示或用于计算机视觉处理。13.根据权利要求12所述的方法，还包括：将第二颜色校正变换应用于所述原始输入图像数据或对应于所述原始输入图像数据的所述图像数据以生成IR纹理输...

【专利技术属性】
技术研发人员：安德斯·格劳内杰普森，
申请(专利权)人：英特尔公司，
类型：发明
国别省市：美国,US