红外和彩色增强的局部图像混合制造技术

本公开提供了“红外和彩色增强的局部图像混合”。在来自红外相机的红外图像中检测第一对象，并且在来自彩色相机的彩色图像中检测第二对象。将所述第一对象与所述第二对象进行比较以确定成对的匹配的第一对象和第二对象。对于每个匹配对，通过基于匹配对中的第二对象的像素的颜色设定区域中的像素的颜色来对输出图像的相应区域进行彩色化。所述区域中的像素具有与匹配对的第一对象中的像素的位置相对应的位置。当彩色化完成时，不在彩色化区域中的像素具有红外图像的强度。输出图像是具有根据彩色图像彩色化的区域的红外图像的版本。据彩色图像彩色化的区域的红外图像的版本。据彩色图像彩色化的区域的红外图像的版本。

【技术实现步骤摘要】
红外和彩色增强的局部图像混合


[0001]本公开涉及车辆显示系统。

技术介绍

[0002]红外相机越来越流行用于增强现实和车辆显示系统，因为红外相机的能见度在诸如夜间、雾、薄雾、恶劣天气和烟雾的条件下比彩色相机更高。此外，红外相机对高动态范围情况(诸如太阳致盲、前灯致盲和进入/离开隧道)是稳健的。然而，因为红外相机不感测颜色的全可见光谱，所以它们的输出通常缺少当在预期用于驾驶员的车辆显示器上显示时可能期望看到的特征的颜色。例如，当仅显示红外视频时，制动灯、交通信号灯、交通标志和街道标志可能不明显。此外，特征检测算法可能无法检测红外视频中的这些类型的特征。尽管诸如制动灯结构的特征的存在可能是可见的和可检测的，但是难以看到(或以计算方式确定)制动灯是否正在发射红光。这种遗漏可能潜在地误导驾驶员或增强现实系统认为制动灯或红色交通信号灯实际上是未点亮的。

技术实现思路

[0003]下面介绍本文讨论的一些概念。在本公开的实施例中，在来自红外相机的红外图像中检测第一对象，并且在来自彩色相机的彩色图像中检测第二对象。将所述第一对象与所述第二对本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种设备，其包括：红外相机，所述红外相机输出场景的红外图像；彩色相机，所述彩色相机输出所述场景的彩色图像；处理硬件，所述硬件被配置为：接收来自所述红外相机的红外图像和来自所述彩色相机的彩色图像；从所述红外图像中提取第一特征；从所述彩色图像中提取第二特征；确定来自所述红外图像的所述第一特征与来自所述彩色图像的所述第二特征之间的匹配；以及生成输出图像，其中所述输出图像的至少一些像素包括根据所述红外图像中的对应像素的强度设定的相应颜色，并且其中所述输出图像的与所述第一特征相对应的区域中的至少一些像素的颜色根据所述第一特征与所述第二特征之间的所述匹配来设定；以及显示器，所述显示器被配置为显示所述输出的彩色图像。2.根据权利要求1所述的设备，其中所述第一特征是从所述场景的背景分割而成的，并且包括在所述场景中捕获的相应前景对象的轮廓。3.根据权利要求1所述的设备，其中所述输出的彩色图像最初包括色度饱和度值(HSV)图像，所述HSV图像的值最初根据所述红外图像中的对应像素的强度来设定，其中所述区域中的所述像素的所述颜色是通过根据所述第二特征中的所述颜色设定它们的相应色调来设定的，并且其中所述HSV图像在由所述显示器显示之前被转换为红
‑
蓝
‑
绿(RGB)图像。4.根据权利要求1所述的设备，其中所述设备结合在车辆中。5.根据权利要求1所述的设备，其中所述提取所述第一特征并提取所述第二特征包括识别所述场景中的对应对象，并且其中所述匹配是至少部分地基于对所述对象的所述识别。6.根据权利要求5所述的设备，其中所述区域中的所述像素的所述颜色是至少部分地基于与所述第一特征或所述第二特征相对应的所识别对象的类型。7.根据权利要求1所述的设备，其中通过一种或多种机器学习算法执行所述第一特征的所述提取和所述第二特征的所述提取。8.根据权利要求1所述的设备，其中所述处理硬件用于根据所述红外相机与所述彩色相机之间的视差对灰度红外图像或所述彩色图像执行几何...

【专利技术属性】
技术研发人员：大卫，
申请(专利权)人：福特全球技术公司，
类型：发明
国别省市：