一种图像处理方法、装置及电子设备制造方法及图纸

本发明专利技术提供一种图像处理方法、装置及电子设备，涉及图像处理技术领域，用以提高抠图获得的前景掩码图效果。该方法包括：获取至少一张可见光背景图像和至少一张非可见光背景图像；获取至少一张可见光待处理图像和获取至少一张非可见光待处理图像；利用可见光背景图像对应的目标可见光背景图像和可见光待处理图像中的当前一张可见光待处理图像获得当前一张可见光待处理图像对应的可见光差异图像，利用非可见光背景图像对应的目标非可见光背景图像和非可见光待处理图像中的当前一张非可见光图像获得当前一张非可见光待处理图像对应的非可见光差异图像；对可见光差异图像和非可见光差异图像进行前景融合获得前景掩码图。本发明专利技术主要用于抠图技术中。

Image processing method, device and electronic equipment

The present invention provides an image processing method, device and electronic equipment, and relates to the technical field of image processing, in order to improve the prospects of matting mask map effect. The method comprises: acquiring at least a visible image background and at least one non visible background image; acquiring at least one visible light image and obtain at least a non visible light image to be processed; the corresponding visible background image object visible background image and visible light image to be processed in the current a visible light image to be processed to obtain the current visible difference image a visible light image corresponding to the use of the corresponding non visible background image target non visible background image and non visible light to obtain the current non visible light image between a non visible light image corresponding to a non current the visible light image in the image; the foreground mask map to obtain the foreground image fusion of visible light and non visible light image difference difference. The invention is mainly used for matting technology.

【技术实现步骤摘要】
一种图像处理方法、装置及电子设备
本专利技术涉及图像处理
，尤其涉及一种图像处理方法、装置及电子设备。
技术介绍
在处理图像时，人们经常会对图像进行抠图处理。抠图处理就是指通过一定的图像处理方法抠出图像中人们感兴趣的图像(即前景图像)，去除人们不感兴趣的图像(即背景图像)。现有技术中的一类抠图方法使用背景相减技术将纯背景图像与混有前景物体和背景的图像进行对比，从而抠出前景图像。但是，当前景物体和背景的颜色接近时，通过这类抠图方式获得的前景图像的效果较差。
技术实现思路
有鉴于此，本专利技术提供一种图像处理方法、装置及电子设备，用以提高抠图获得的前景掩码图的效果。第一方面，本专利技术提供一种图像处理方法，包括：一种图像处理方法，包括：利用可见光拍摄装置获取至少一张可见光背景图像和利用非可见光拍摄装置获取至少一张非可见光背景图像，其中所述可见光背景图像和所述非可见光背景图像中不包括前景物体；利用所述可见光拍摄装置获取至少一张可见光待处理图像和利用所述非可见光拍摄装置获取至少一张非可见光待处理图像，其中所述可见光待处理图像和所述非可见光待处理图像中包括所述前景物体；利用所述可见光背景图像对应的目标可见光背景图像和所述可见光待处理图像中的当前一张可见光待处理图像获得所述当前一张可见光待处理图像对应的可见光差异图像，利用所述非可见光背景图像对应的目标非可见光背景图像和所述非可见光待处理图像中的当前一张非可见光图像获得所述当前一张非可见光待处理图像对应的非可见光差异图像；对所述可见光差异图像和所述非可见光差异图像进行前景融合，获得前景掩码图。其中，所述利用所述可见光背景图像对应的目标可见光背景图像和所述可见光待处理图像中的当前一张可见光待处理图像获得所述当前一张可见光待处理图像对应的可见光差异图像，包括：利用所述目标可见光背景图像和所述当前一张可见光待处理图像进行背景相减处理，将背景相减处理的结果作为所述当前一张可见光待处理图像对应的可见光差异图像；所述利用所述非可见光背景图像对应的目标非可见光背景图像和所述非可见光待处理图像中的当前一张非可见光图像获得所述当前一张非可见光待处理图像对应的非可见光差异图像，包括：利用所述目标非可见光背景图像和所述当前一张非可见光待处理图像进行背景相减处理，将背景相减处理的结果作为所述当前一张非可见光待处理图像对应的非可见光差异图像。其中，在所述利用可见光拍摄装置获取至少一张可见光背景图像和利用非可见光拍摄装置获取至少一张非可见光背景图像之后，所述方法还包括：获取所述各可见光背景图像和所述各非可见光背景图像的曝光时间；在所述利用所述可见光拍摄装置获取至少一张可见光待处理图像和利用所述非可见光拍摄装置获取至少一张非可见光待处理图像之后，所述方法还包括：获取所述各可见光待处理图像和所述各非可见光待处理图像的曝光时间。其中，所述目标可见光背景图像是从所述至少一张可见光背景图像中选取的，其中所述目标可见光背景图像的曝光时间和所述当前一张可见光待处理图像的曝光时间相同；所述目标非可见光背景图像是从所述至少一张非可见光背景图像中选取的，其中所述目标非可见光背景图像的曝光时间和所述当前一张非可见光待处理图像的曝光时间相同。其中，根据所述至少一张可见光背景图像获得所述目标可见光背景图像，其中所述目标可见光背景图像中各像素的灰度值是预定数量的可见光背景图像中对应像素灰度值的均值；根据所述至少一张非可见光背景图像获得所述目标非可见光背景图像，其中所述目标非可见光背景图像中各像素的灰度值是预定数量的非可见光背景图像中对应像素灰度值的均值。其中，所述对所述可见光差异图像和所述非可见光差异图像进行前景融合，获得前景掩码图，包括：获取可见光前景灰度值差异阈值和非可见光前景灰度值差异阈值；将所述可见光差异图像中各像素的灰度值和所述可见光前景灰度差异值阈值进行比较，并将所述可见光差异图像中灰度值大于或等于所述可见光前景灰度值差异阈值的像素组成的图像区域作为可见光前景掩码图；将所述非可见光差异图像中各像素的灰度值和所述非可见光前景灰度值差异阈值进行比较，并将所述非可见光差异图像中灰度值大于或等于所述非可见光前景灰度值差异阈值的像素组成的图像区域作为非可见光前景掩码图；将所述可见光前景掩码图和所述非可见光前景掩码图进行合并，并将合并的结果作为所述前景掩码图。其中，所述对所述可见光差异图像和所述非可见光差异图像进行前景融合，获得前景掩码图，包括：获取综合前景灰度值差异阈值；利用所述可见光差异图像和所述非可见光差异图像获得综合差异图像；将所述综合差异图像中各像素的灰度值和所述综合前景灰度值差异阈值进行比较，并将所述综合差异图像中灰度值大于或等于所述综合前景灰度值差异阈值的像素组成的图像区域作为前景掩码图。其中，在所述对所述可见光差异图像和所述非可见光差异图像进行前景融合，获得前景掩码图之后，所述方法还包括：对所述前景掩码图进行边缘优化处理。其中，所述对所述前景掩码图进行边缘优化处理，包括：对所述前景掩码图进行形态学滤波，获得所述前景掩码图中的提示Trimap掩码图，并利用所述Trimap掩码图获取所述前景掩码图中的Trimap区域图像；计算所述Trimap区域图像中各像素的前景比例参数。其中，在所述利用可见光拍摄装置获取至少一张可见光背景图像和利用非可见光拍摄装置获取至少一张非可见光背景图像之前，所述方法还包括：对所述可见光拍摄装置和所述非可见光拍摄装置进行配准。第二方面，本专利技术提供一种图像处理装置，包括：可见光图像获取单元，用于分别获取至少一张可见光背景图像和至少一张可见光待处理图像；非可见光图像获取单元，用于分别获取至少一张非可见光背景图像和至少一张非可见光待处理图像；差异图像获取单元，用于利用所述可见光背景图像对应的目标可见光背景图像和所述可见光待处理图像中的当前一张可见光待处理图像获得所述当前一张可见光待处理图像对应的可见光差异图像，利用所述非可见光背景图像对应的目标非可见光背景图像和所述非可见光待处理图像中的当前一张非可见光图像获得所述当前一张非可见光待处理图像对应的非可见光差异图像；图像处理单元，用于对所述可见光差异图像和所述非可见光差异图像进行前景融合，获得前景掩码图；其中所述可见光背景图像和所述非可见光背景图像中不包括前景物体，所述可见光待处理图像和所述非可见光待处理图像中包括所述前景物体。其中，所述差异图像获取单元包括：第一图像获取模块，用于利用所述目标可见光背景图像和所述当前一张可见光待处理图像进行背景相减处理，将背景相减处理的结果作为所述当前一张可见光待处理图像对应的可见光差异图像；第二图像获取模块，用于利用所述目标非可见光背景图像和所述当前一张非可见光待处理图像进行背景相减处理，将背景相减处理的结果作为所述当前一张非可见光待处理图像对应的非可见光差异图像。其中，所述装置还包括：存储单元，用于存储所述各可见光背景图像和所述各非可见光背景图像的曝光时间，以及存储所述各可见光待处理图像和所述各非可见光待处理图像的曝光时间。其中，所述第一图像获取模块包括：选取子模块，用于从所述至少一张可见光背景图像中选取所述目标可见光背景图像，其中所述目标可见光背景图像的曝光时间和所述当前一张本文档来自技高网...

【技术保护点】
一种图像处理方法，其特征在于，包括：利用可见光拍摄装置获取至少一张可见光背景图像和利用非可见光拍摄装置获取至少一张非可见光背景图像，其中所述可见光背景图像和所述非可见光背景图像中不包括前景物体；利用所述可见光拍摄装置获取至少一张可见光待处理图像和利用所述非可见光拍摄装置获取至少一张非可见光待处理图像，其中所述可见光待处理图像和所述非可见光待处理图像中包括所述前景物体；利用所述可见光背景图像对应的目标可见光背景图像和所述可见光待处理图像中的当前一张可见光待处理图像获得所述当前一张可见光待处理图像对应的可见光差异图像，利用所述非可见光背景图像对应的目标非可见光背景图像和所述非可见光待处理图像中的当前一张非可见光图像获得所述当前一张非可见光待处理图像对应的非可见光差异图像；对所述可见光差异图像和所述非可见光差异图像进行前景融合，获得前景掩码图。

【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：利用可见光拍摄装置获取至少一张可见光背景图像和利用非可见光拍摄装置获取至少一张非可见光背景图像，其中所述可见光背景图像和所述非可见光背景图像中不包括前景物体；利用所述可见光拍摄装置获取至少一张可见光待处理图像和利用所述非可见光拍摄装置获取至少一张非可见光待处理图像，其中所述可见光待处理图像和所述非可见光待处理图像中包括所述前景物体；利用所述可见光背景图像对应的目标可见光背景图像和所述可见光待处理图像中的当前一张可见光待处理图像获得所述当前一张可见光待处理图像对应的可见光差异图像，利用所述非可见光背景图像对应的目标非可见光背景图像和所述非可见光待处理图像中的当前一张非可见光图像获得所述当前一张非可见光待处理图像对应的非可见光差异图像；对所述可见光差异图像和所述非可见光差异图像进行前景融合，获得前景掩码图。2.根据权利要求1所述的方法，其特征在于，所述利用所述可见光背景图像对应的目标可见光背景图像和所述可见光待处理图像中的当前一张可见光待处理图像获得所述当前一张可见光待处理图像对应的可见光差异图像，包括：利用所述目标可见光背景图像和所述当前一张可见光待处理图像进行背景相减处理，将背景相减处理的结果作为所述当前一张可见光待处理图像对应的可见光差异图像；所述利用所述非可见光背景图像对应的目标非可见光背景图像和所述非可见光待处理图像中的当前一张非可见光图像获得所述当前一张非可见光待处理图像对应的非可见光差异图像，包括：利用所述目标非可见光背景图像和所述当前一张非可见光待处理图像进行背景相减处理，将背景相减处理的结果作为所述当前一张非可见光待处理图像对应的非可见光差异图像。3.根据权利要求2所述的方法，其特征在于，在所述利用可见光拍摄装置获取至少一张可见光背景图像和利用非可见光拍摄装置获取至少一张非可见光背景图像之后，所述方法还包括：获取所述各可见光背景图像和所述各非可见光背景图像的曝光时间；在所述利用所述可见光拍摄装置获取至少一张可见光待处理图像和利用所述非可见光拍摄装置获取至少一张非可见光待处理图像之后，所述方法还包括：获取所述各可见光待处理图像和所述各非可见光待处理图像的曝光时间。4.根据权利要求3所述的方法，其特征在于，所述目标可见光背景图像是从所述至少一张可见光背景图像中选取的，其中所述目标可见光背景图像的曝光时间和所述当前一张可见光待处理图像的曝光时间相同；所述目标非可见光背景图像是从所述至少一张非可见光背景图像中选取的，其中所述目标非可见光背景图像的曝光时间和所述当前一张非可见光待处理图像的曝光时间相同。5.根据权利要求2所述的方法，其特征在于，根据所述至少一张可见光背景图像获得所述目标可见光背景图像，其中所述目标可见光背景图像中各像素的灰度值是预定数量的可见光背景图像中对应像素灰度值的均值；根据所述至少一张非可见光背景图像获得所述目标非可见光背景图像，其中所述目标非可见光背景图像中各像素的灰度值是预定数量的非可见光背景图像中对应像素灰度值的均值。6.根据权利要求1所述的方法，其特征在于，所述对所述可见光差异图像和所述非可见光差异图像进行前景融合，获得前景掩码图，包括：获取可见光前景灰度值差异阈值和非可见光前景灰度值差异阈值；将所述可见光差异图像中各像素的灰度值和所述可见光前景灰度差异值阈值进行比较，并将所述可见光差异图像中灰度值大于或等于所述可见光前景灰度值差异阈值的像素组成的图像区域作为可见光前景掩码图；将所述非可见光差异图像中各像素的灰度值和所述非可见光前景灰度值差异阈值进行比较，并将所述非可见光差异图像中灰度值大于或等于所述非可见光前景灰度值差异阈值的像素组成的图像区域作为非可见光前景掩码图；将所述可见光前景掩码图和所述非可见光前景掩码图进行合并，并将合并的结果作为所述前景掩码图。7.根据权利要求1所述的方法，其特征在于，所述对所述可见光差异图像和所述非可见光差异图像进行前景融合，获得前景掩码图，包括：获取综合前景灰度值差异阈值；利用所述可见光差异图像和所述非可见光差异图像获得综合差异图像；将所述综合差异图像中各像素的灰度值和所述综合前景灰度值差异阈值进行比较，并将所述综合差异图像中灰度值大于或等于所述综合前景灰度值差异阈值的像素组成的图像区域作为前景掩码图。8.根据权利要求1-7任一所述的方法，其特征在于，在所述对所述可见光差异图像和所述非可见光差异图像进行前景融合，获得前景掩码图之后，所述方法还包括：对所述前景掩码图进行边缘优化处理。9.根据权利要求8所述的方法，其特征在于，所述对所述前景掩码图进行边缘优化处理，包括：对所述前景掩码图进行形态学滤波，获得所述前景掩码图中的提示Trimap掩码图，并利用所述Trimap掩码图获取所述前景掩码图中的Trimap区域图像；计算所述Trimap区域图像中各像素的前景比例参数。10.根据权利要求1-7任一所述的方法，其特征在于，在所述利用可见光拍摄装置获取至少一张可见光背景图像和利用非可见光拍摄装置获取至少一张非可见光背景图像之前，所述方法还包括：对所述可见光拍摄装置和所述非可见光拍摄装置进行配准。11.一种图像处理装置，其特征在于，包括：可见光图像获取单元，用于分别获取至少一张可见光背景图像和至少一张可见光待处理图像；非可见光图像获取单元，用于分别获取至少一张非可见光背景图像和至少一张非可见光待处理图像；差异图像获取单元，用于利用所述可见光背景图像对应的目标可见光背景图像...

【专利技术属性】
技术研发人员：刑旭，郁树达，
申请(专利权)人：深圳超多维光电子有限公司，深圳市墨克瑞光电子研究院，
类型：发明
国别省市：广东,44