图像获取器20的黑白偏振图像获取器21获取黑白偏振图像，并且彩色图像获取器22获取彩色图像。反射去除图像生成器40计算与基于黑白偏振图像生成的黑白反射去除结果相关的特性信息，例如，指示黑白偏振图像与从黑白偏振图像中的每个偏振方向的图像计算出的平均亮度之间的关系的信息，或者用于从黑白偏振图像获得黑白反射去除结果的信息。反射去除图像生成器40还使用计算出的特性信息或经优化的特性信息生成从彩色图像中去除了镜面反射的反射去除彩色图像。因此，可以获得高灵敏度的反射去除彩色图像。去除彩色图像。去除彩色图像。
【技术实现步骤摘要】
【国外来华专利技术】图像处理装置、图像处理方法和程序
[0001]本技术涉及图像处理装置、图像处理方法和程序，并且能获得具有高灵敏度的反射去除彩色图像。
技术介绍
[0002]常规地，由于反射分量和透射分量的偏振信息不同，非专利文献1公开了使用偏振图像去除玻璃表面或水面上的反射的方法。专利文献1公开了针对获取偏振图像的成像装置，使用诸如玻璃表面或水面的反射表面的角度来去除反射分量。
[0003][引用列表][0004][专利文献][0005][专利文献1]WO 2018/092540
[0006][非专利文献][0007][非专利文献1][0008]Daisuke Miyazaki、Katsushi Ikeuchi的“Basic Theory of Polarization and Its Applications”，IPSJ Transactions on Computer Vision and Image Media，2008年，第1卷，第1期，第64
‑
72页。
技术实现思路
[0009][技术问题][0010]顺便提及，在获取偏振图像的成像装置中，被摄体光经由诸如偏振板的偏振元件入射到成像元件上。当获取彩色偏振图像作为偏振图像时，成像装置使被摄体光经由偏振元件和滤色器进入成像元件。由于这个原因，不仅是偏振滤波器的光衰减，而且滤色器的光衰减也同时发生。因此，当基于彩色偏振图像生成去除了镜面反射的反射去除彩色图像时，很难获得高灵敏度的反射去除彩色图像。
[0011]因此，本技术的目的是提供能够获得高灵敏度的反射去除彩色图像的图像处理装置、图像处理方法和程序。
[0012][问题的解决方案][0013]本技术的第一方面提供了图像处理装置，该图像处理装置包括反射去除图像生成器，其计算与基于黑白偏振图像生成的黑白反射去除结果相关的特性信息，并且生成其中使用计算出的特性信息从彩色图像中去除了镜面反射的反射去除彩色图像。
[0014]在本技术中，反射去除图像生成器计算与基于黑白偏振图像生成的黑白反射去除结果相关的特性信息。反射去除图像生成器计算指示黑白偏振图像与从黑白偏振图像中的每个偏振方向的图像计算出的平均亮度之间的关系的信息作为特性信息。当计算这种特性信息时，例如，反射去除图像生成器通过将彩色图像乘以指示黑白偏振图像的亮度与平均亮度的比率的特性信息来生成彩色偏振图像，以生成其中从彩色图像中去除了基于彩色偏振图像计算的镜面反射的反射去除彩色图像。彩色图像是RGB颜色空间或者亮度和颜色分
离的颜色空间的图像。
[0015]反射去除图像生成器计算计算用于从黑白偏振图像中获得黑白反射去除结果的信息作为特性信息，使用计算出的特性信息作为初始值来优化特性信息，并且并且基于经优化的特性信息和彩色图像生成反射去除彩色图像。反射去除图像生成器计算与黑白偏振图像中的镜面反射相关的信息作为特性信息。例如，当计算黑白偏振图像的用于计算镜面反射分量的斯托克斯参数作为特性信息时，反射去除图像生成器使用由特性信息指示的斯托克斯参数作为初始值，并且优化特性信息以使彩色图像的亮度分量与镜面反射分量之间的几何相关度或者特征量空间的相关度最小化。反射去除图像生成器使用彩色图像和经优化的特性信息生成反射去除彩色图像。
[0016]图像处理装置还包括反射表面信息获取器，其获取反射表面信息，该反射表面信息指示导致镜面反射的被摄体的反射表面的角度，并且反射去除图像生成器一起使用由反射表面信息获取器获取的反射表面信息来计算指示黑白偏振图像的偏振特性的信息作为特性信息。例如，当计算黑白反射图像和黑白透射图像为特性信息时，反射去除图像生成器使用黑白反射图像和黑白透射图像作为初始值，以基于彩色图像来优化特性信息，以使彩色反射图像与彩色透射图像之间的几何相关度或者特征量空间的相关度最小化。反射去除图像生成器使用彩色图像、经优化的特性信息以及由反射表面信息获取器获取的反射表面信息来生成反射去除彩色图像。
[0017]输出由反射去除图像生成器生成的反射去除彩色图像的输出单元将用于优化特性信息的评价指标与反射去除彩色图像一起输出。例如，输出单元将基于评价指标的显示叠加在反射去除彩色图像的对应位置上。
[0018]本技术的第二方面提供了图像处理方法，该图像处理方法包括：允许反射去除图像生成器计算与基于黑白偏振图像生成的黑白反射去除结果相关的特性信息，并且生成其中使用计算出的特性信息从彩色图像中去除了镜面反射的反射去除彩色图像。
[0019]本技术的第三个方面提供了用于使计算机执行图像处理的程序，该计算机执行：计算与基于黑白偏振图像生成的黑白反射去除结果相关的特性信息，以及生成其中使用计算出的特性信息从彩色图像中去除了镜面反射的反射去除彩色图像。
[0020]本技术的程序是可以通过以计算机可读格式提供的存储介质或通信介质(例如，诸如光盘、磁盘或半导体存储器的存储介质，或者诸如网络的通信介质)在能够执行各种程序代码的通用计算机中提供的程序。以计算机可读格式提供的这种程序允许在计算机上实现根据该程序的处理。
附图说明
[0021][图1]图1是示出第一实施方式的配置的图。
[0022][图2]图2是示出黑白偏振图像获取器的配置的图。
[0023][图3]图3是示出黑白偏振图像获取器和彩色图像获取器被集成在一起时的像素配置的图。
[0024][图4]图4是示出第一实施方式的操作的流程图。
[0025][图5]图5是示出第二实施方式的操作的流程图。
[0026][图6]图6是示出第二实施方式的操作示例的图。
[0027][图7]图7是示出反射去除彩色图像的输出的图。
[0028][图8]图8是示出第三实施方式的配置的图。
[0029][图9]图9是示出第三实施方式的操作的流程图。
具体实施方式
[0030]下面将描述用于实现本技术的实施方式。这里，将按以下顺序进行描述。
[0031]1.第一实施方式
[0032]1‑
1.第一实施方式的配置
[0033]1‑
2.第一实施方式的操作
[0034]2.第二实施方式
[0035]2‑
1.第二实施方式的操作
[0036]3.第三实施方式
[0037]3‑
1.第三实施方式的配置
[0038]3‑
2.第三实施方式的操作
[0039]4.修改示例
[0040]5.应用示例
[0041]<1.第一实施方式>
[0042]本技术的图像处理装置对导致镜面反射的被摄体进行成像，以获得黑白偏振图像和彩色图像，获得与基于黑白偏振图像生成的黑白反射去除结果相关的特性信息，并且使用特性信息生成其中从彩色图像中去除了镜面反射的反射去除彩色图像。
[0043]根据第一实施方式的图像处理装置使用指示黑白偏振图像的亮度分量与黑白反射本文档来自技高网...
【技术保护点】
【技术特征摘要】
【国外来华专利技术】1.一种图像处理装置，包括：反射去除图像生成器，其计算与基于黑白偏振图像生成的黑白反射去除结果相关的特性信息，并且生成其中使用计算出的特性信息从彩色图像中去除了镜面反射的反射去除彩色图像。2.根据权利要求1所述的图像处理装置，其中，所述反射去除图像生成器计算指示所述黑白偏振图像与从所述黑白偏振图像中的每个偏振方向的图像计算出的平均亮度之间的关系的信息作为所述特性信息，基于所述特性信息和所述彩色图像生成彩色偏振图像，并且从所述彩色图像中去除基于所生成的彩色偏振图像计算出的镜面反射以生成所述反射去除彩色图像。3.根据权利要求2所述的图像处理装置，其中，所述反射去除图像生成器通过将所述彩色图像乘以指示所述黑白偏振图像的亮度与所述平均亮度的比率的特性信息来生成所述彩色偏振图像。4.根据权利要求1所述的图像处理装置，其中，所述反射去除图像生成器计算用于从所述黑白偏振图像中获得所述黑白反射去除结果的信息作为所述特性信息，并且基于所述特性信息和所述彩色图像生成所述反射去除彩色图像。5.根据权利要求4所述的图像处理装置，其中，所述反射去除图像生成器优化所述特性信息，并且基于经优化的特性信息和所述彩色图像生成所述反射去除彩色图像。6.根据权利要求5所述的图像处理装置，其中，所述反射去除图像生成器计算与所述黑白偏振图像中的镜面反射相关的信息作为所述特性信息，优化所述特性信息以使所述彩色图像的亮度分量与镜面反射分量之间的相关度最小化，并且使用所述彩色图像和经优化的特性信息生成所述反射去除彩色图像。7.根据权利要求6所述的图像处理装置，其中，所述反射去除图像生成器使用所述黑白偏振图像的用于计算所述镜面反射分量的斯托克斯参数作为所述特性信息，并且使用由所述特性信息指示的斯托克斯参数作为初始值执行优化。8.根据权利要求5所述的图像处理装置，还包括：反射表面信息获取器，其获取反射表面信息，所述反射...
【专利技术属性】
技术研发人员：大野大志，近藤雄飞，孙乐公，
申请(专利权)人：索尼集团公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。