图像处理方法、装置、电子设备和可读存储介质制造方法及图纸

本申请公开了一种图像处理方法，属于图像处理领域，该方法包括：根据第一图像和第二图像，构建雾霾感知深度图像，第一图像和第二图像的拍摄倍率不同，雾霾感知深度图包括像素点深度信息、像素点边缘信息及像素点亮度信息中的至少一项；根据雾霾感知深度图像、第一图像和第二图像，得到雾霾图像特征图，雾霾图像特征图用于指示图像不同区域雾的浓度；根据雾霾特征图像对第一图像和第二图像进行图像重构处理，生成第三图像，第三图像为对第一图像和第二图像去雾后的图像。第二图像去雾后的图像。第二图像去雾后的图像。

【技术实现步骤摘要】
图像处理方法、装置、电子设备和可读存储介质


[0001]本申请属于图像处理领域，具体涉及一种图像处理方法、装置、电子设备和可读存储介质。

技术介绍

[0002]在用户需求拍摄图像、且拍摄环境中存在雾霾的情况下，雾霾浓度越高，拍摄的图像质量越差。
[0003]然而，现有的图像去雾方法，多为基于深度学习方法，其并不能充分利用有雾图像的深度信息等，因此，使得经过去雾处理后的图像仍然存在雾霾点，或是去雾效果不自然的情况，如此，电子设备在有雾环境中拍摄的图像的图像质量较差。

技术实现思路

[0004]本申请实施例的目的是提供一种图像处理方法、装置、电子设备和可读存储介质，能够提升电子设备在有雾环境中拍摄的图像的图像质量。
[0005]第一方面，本申请实施例提供了一种图像处理方法，该方法包括：根据第一图像和第二图像，构建雾霾感知深度图像，第一图像和第二图像的拍摄倍率不同，雾霾感知深度图包括像素点深度信息、像素点边缘信息及像素点亮度信息中的至少一项；根据雾霾感知深度图像、第一图像和第二图像，得到雾霾图像特征图，雾霾图像特征图用于指示图像不同区域雾的浓度；根据雾霾特征图像对第一图像和第二图像进行图像重构处理，生成第三图像，第三图像为对第一图像和第二图像去雾后的图像。
[0006]第二方面，本申请实施例提供了一种图像处理装置，该装置包括：构建模块和处理模块；构建模块，用于根据第一图像和第二图像，构建雾霾感知深度图像，第一图像和第二图像的拍摄倍率不同，雾霾感知深度图包括像素点深度信息、像素点边缘信息及像素点亮度信息中的至少一项。处理模块，用于根据雾霾感知深度图像、第一图像和第二图像，得到雾霾图像特征图，雾霾图像特征图用于指示图像不同区域雾的浓度，并根据雾霾特征图像对第一图像和第二图像进行图像重构处理，生成第三图像，第三图像为对第一图像和第二图像去雾后的图像。
[0007]第三方面，本申请实施例提供了一种电子设备，该电子设备包括处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
[0008]第四方面，本申请实施例提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
[0009]第五方面，本申请实施例提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第一方面所述的方法。
[0010]第六方面，本申请实施例提供一种计算机程序产品，该程序产品被存储在存储介
质中，该程序产品被至少一个处理器执行以实现如第一方面所述的方法。
[0011]在本申请实施例中，电子设备可以根据第一图像和第二图像，构建雾霾感知深度图像，其中，第一图像和第二图像的拍摄倍率不同，雾霾感知深度图包括像素点深度信息、像素点边缘信息及像素点亮度信息中的至少一项；然后电子设备可以根据雾霾感知深度图像、第一图像和第二图像，得到雾霾图像特征图，雾霾图像特征图用于指示图像不同区域雾的浓度；并根据雾霾特征图像对第一图像和第二图像进行图像重构处理，生成第三图像，第三图像为对第一图像和第二图像去雾后的图像。由于电子设备可以根据不同拍摄倍率的图像，构建包括像素信息的雾霾感知深度图像，并进一步地得到雾霾图像特征图，由于该雾霾图像特征图可以指示图像中包括雾的区域的浓度，从而可以判断出第一图像和第二图像中包括雾的区域是那些区域，以及该区域的雾的浓度信息，从而对包括雾的区域，基于该区域的雾的浓度信息，对该区域图像进行处理，以得到不包含雾的图像，即可以得到质量较高的无图图像，如此，提升了电子设备在有雾环境中拍摄的图像的图像质量。
附图说明
[0012]图1是本申请实施例提供的一种图像处理方法的流程图；
[0013]图2(a)是本申请实施例提供的一种手机的界面的实例示意图之一；
[0014]图2(b)是本申请实施例提供的一种手机的界面的实例示意图之二；
[0015]图3是本申请实施例提供的一种一种卷积神经网络的结构图；
[0016]图4是本申请实施例提供的一种图像处理装置的结构示意图；
[0017]图5是本申请实施例提供的一种电子设备的硬件结构示意图之一；
[0018]图6是本申请实施例提供的一种电子设备的硬件结构示意图之二。
具体实施方式
[0019]下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员获得的所有其他实施例，都属于本申请保护的范围。
[0020]本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。
[0021]受污染影响，现在出现雾霾天气的频率不断增大。在出现雾霾天气时，若用户使用电子设备进行拍摄，例如使用手机进行拍摄，则拍摄出来的图像的质量会降低，并且图像的质量会随着雾霾的浓度的增大而降低。现有的图像处理方法包括物理方法或深度学习方法，但是现有方法很难充分利用有雾图像本身的深度信息等信息，因此，可能会造成图像去雾不自然等问题。
[0022]目前，现有的手机通常具备两个摄像头，因此，本申请的图像处理方法基于手机中的双摄镜头，基于感知图像深度信息，对图像进行去雾，从而可以充分利用有雾图像的深度
信息、亮度信息和边缘信息等，
[0023]当出现雾霾时，使用手机拍摄的照片会降质，且雾霾越大采集到的图片质量就会越差。现有去雾方法分为基于物理方法和深度学习方法，其中，基于物理方法的，无法针对不同场景自适应调整相应参数，得到的透射率图也很难还原出无雾图像。基于深度学习方法很难有效学习到雾霾的特征，也很难重构无雾图像。这些方法都不能达到很好的去雾效果，影响拍摄体验。
[0024]本专利技术基于日常使用的手机双摄，即：基于1X主摄和2X副摄同时拍摄有雾图像，并利用双摄计算出雾霾感知深度图，该深度图综合了有雾图像的边缘、亮度和深度信息。之后，在有雾图像学习中自适应调节滤波器参数，重点提取雾霾较重地方的特征。然后，基于雾霾感知深度图，排除亮光干扰后计算大气光值。同时，以有雾图像为输入、以雾霾感知深度图为引导图像，利用引导滤波来细化透射率图。最后，利用有雾图像、细化后的透射率图和大气光值来重构无雾图像。
[0025]下面结合附图，通过具体的实施例及其应用场景对本申请实施例提供的图像去雾进行详细地说明。
[0026]本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法，其特征在于，所述方法包括：根据第一图像和第二图像，构建雾霾感知深度图像，所述第一图像和所述第二图像的拍摄倍率不同，所述雾霾感知深度图包括像素点深度信息、像素点边缘信息及像素点亮度信息中的至少一项；根据所述雾霾感知深度图像、所述第一图像和所述第二图像，得到雾霾图像特征图，所述雾霾图像特征图用于指示图像不同区域雾的浓度；根据所述雾霾特征图像对所述第一图像和所述第二图像进行图像重构处理，生成第三图像，所述第三图像为对所述第一图像和所述第二图像去雾后的图像。2.根据权利要求1所述的方法，其特征在于，所述根据所述雾霾特征图像对所述第一图像和所述第二图像进行图像重构处理，生成第三图像，包括：根据所述雾霾图像特征图，得到第一大气光值和第一透射率估计图像；根据所述雾霾感知深度图像、第一透射率估计图像和所述第一大气光值，对所述第一图像和所述第二图像进行图像重构处理，生成所述第三图像。3.根据权利要求1所述的方法，其特征在于，所述根据第一图像和第二图像，构建雾霾感知深度图，包括：对所述第一图像和所述第二图像进行图像匹配，得到匹配信息；根据所述匹配信息，得到所述第一图像和所述第二图像中的每个像素点的深度信息；根据所述深度信息，得到景深图像；根据所述第一图像、所述第二图像和所述景深图像，得到雾点图像；对所述第一图像和所述第二图像进行边缘检测，得到边缘检测图像；根据所述景深图像、所述雾点图像和所述边缘检测图像，构建所述雾霾感知深度图像。4.根据权利要求1所述的方法，其特征在于，所述根据所述雾霾感知深度图、所述第一图像和所述第二图像，得到雾霾图像特征图，包括：根据所述雾霾感知深度图，得到浓度信息；所述浓度信息用于指示所述第一图像和所述第二图像中的雾的浓度值；将所述第一图像和所述第二图像输入至高斯滤波函数，根据所述浓度信息，得到所述雾霾图像特征图。5.根据权利要求2所述的方法，其特征在于，所述根据所述雾霾图像特征图，得到第一大气光值和第一透射率估计图像，包括：根据所述雾霾图像特征图，得到所述第一大气光值；根据所述雾霾图...

【专利技术属性】
技术研发人员：李光泽，康波，
申请(专利权)人：维沃移动通信有限公司，
类型：发明
国别省市：