图像处理方法、装置、电子设备及介质制造方法及图纸

本申请公开了一种图像处理方法、装置、电子设备及介质，属于图像处理技术领域。该方法包括：计算二维图像中前景图像的第一法线贴图和光照反射率权值分布图；基于第一法线贴图、光照反射率权值分布图和第一光源属性信息，对第一图像进行光照渲染处理，第一图像包括二维图像或二维图像对应的三维图像；显示渲染后的第一图像。第一图像。第一图像。

【技术实现步骤摘要】
图像处理方法、装置、电子设备及介质


[0001]本申请属于图像处理
，具体涉及一种图像处理方法、装置、电子设备及介质。

技术介绍

[0002]随着摄像技术的发展，越来越多的用户在拍照的时候会更加追求照片的氛围感。
[0003]示例性地，为了提升照片的光效效果，可以在照片上添加光效，例如，电子设备可以在照片上叠加光线，以提升照片的氛围感。
[0004]然而，由于电子设备是以叠加图层的方式在照片上添加光效的，因此光效可能减弱或模糊照片原有的立体感，从而导致添加光效后的照片的显示效果较差。

技术实现思路

[0005]本申请实施例的目的是提供一种图像处理方法、装置、电子设备及介质，能够解决添加光效后的照片的显示效果较差的问题。
[0006]第一方面，本申请实施例提供了一种图像处理方法，该方法包括：计算二维图像中前景图像的第一法线贴图和光照反射率权值分布图；基于第一法线贴图、光照反射率权值分布图和第一光源属性信息，对第一图像进行光照渲染处理，第一图像包括二维图像或二维图像对应的三维图像；显示渲染后的第一图像。
[0007]第二方面，本申请实施例提供了一种图像处理装置，该图像处理装置可以包括：处理模块、渲染模块和显示模块；处理模块，用于计算二维图像中前景图像的第一法线贴图和光照反射率权值分布图；渲染模块，用于基于第一法线贴图、光照反射率权值分布图和第一光源属性信息，对处理模块处理后的第一图像进行光照渲染处理，第一图像包括二维图像或二维图像对应的三维图像；显示模块，用于显示渲染模块渲染后的第一图像。
[0008]第三方面，本申请实施例提供了一种电子设备，该电子设备包括处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
[0009]第四方面，本申请实施例提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
[0010]第五方面，本申请实施例提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第一方面所述的方法。
[0011]第六方面，本申请实施例提供一种计算机程序产品，该程序产品被存储在存储介质中，该程序产品被至少一个处理器执行以实现如第一方面所述的方法。
[0012]在本申请实施例中，可以计算二维图像中前景图像的第一法线贴图和光照反射率权值分布图；基于第一法线贴图、光照反射率权值分布图和第一光源属性信息，对第一图像进行光照渲染处理，第一图像包括二维图像或二维图像对应的三维图像；显示渲染后的第
一图像。通过该方案，当需求对二维图像进行光照渲染时，由于先计算二维图像中前景图像的第一法线贴图和光照反射率权值分布图，然后基于二维图像中前景图像的法线贴图和光照反射率权值分布图，对该二维图像或该二维图像对应的三维图像进行光照渲染，因此可以确保渲染后的图像具有较好的立体感，如此可以提高添加光效后的图像的显示效果。
附图说明
[0013]图1是本申请实施例提供的图像处理方法的流程示意图之一；
[0014]图2是本申请实施例提供的图像处理方法中的二维图像中前景图像的第一法线贴图的示意图；
[0015]图3是神经网络模型的示意图；
[0016]图4是申请实施例提供的图像处理方法中二维图像的示意图；
[0017]图5是二维图像中前景图像的像素图像的示意图；
[0018]图6(A)是申请实施例提供的图像处理方法应用的界面示意图之一；
[0019]图6(B)是申请实施例提供的图像处理方法应用的界面示意图之二；
[0020]图6(C)是申请实施例提供的图像处理方法应用的界面示意图之三；
[0021]图6(D)是申请实施例提供的图像处理方法应用的界面示意图之四；
[0022]图7是本申请实施例提供的图像处理方法的流程示意图之二；
[0023]图8是本申请实施例提供的图像处理装置的结构示意图；
[0024]图9是本申请实施例提供的电子设备的结构示意图之一；
[0025]图10是本申请实施例提供的电子设备的结构示意图之二。
具体实施方式
[0026]下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员获得的所有其他实施例，都属于本申请保护的范围。
[0027]本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的术语在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。
[0028]本申请的说明书和权利要求书中的术语“至少一个(项)”、“至少之一”等指其包含对象中的任意一个、任意两个或两个以上的组合。例如，a、b、c中的至少一个(项)，可以表示：“a”、“b”、“c”、“a和b”、“a和c”、“b和c”以及“a、b和c”，其中a，b，c可以是单个，也可以是多个。同理，“至少两个(项)”是指两个或两个以上，其表达的含义与“至少一个(项)”类似。
[0029]下面对本申请说明书和权利要求书涉及的名词和术语进行解释。
[0030]深度估计：对单张2维(Dimension，D)静态图像进行高精度的深度估计，得到2D图像中每个像素的深度信息。可以理解，根据2D图像的深度信息可以确定2D图像中的主体距离摄像头的距离。
[0031]法线贴图(Normal Map)：是一种凹凸贴图(Bump Map)。法线贴图是一种特殊的纹理，图像的法线贴图可以将提取出图像中对象的表面细节(如凹凸、凹槽和划痕)。
[0032]obj文件：是3D模型文件格式。Obj文件中包含有关3D对象的几何体的信息。
[0033]渲染(Rendering)：渲染是指将计算机程序中的图形数据转化为图像的过程，换句话说，是将所设计内容利用软件本身或者辅助软件制作成最终效果图或者动画的过程。在渲染过程通过加入纹理等效果，可以使得3D图像更加逼真，质感更加丰富。
[0034]下面结合附图，通过具体的实施例及其应用场景对本申请实施例提供的图像处理方法、装置、电子设备及介质进行详细地说明。
[0035]本申请实施例提供的图像处理方法、装置、电子设备及介质可以应用于对二维图像进行光照渲染，以提高二维图像的氛围感的场景中。
[0036]随着摄像技术的发展，越来越多的用户在拍照的时候会更加追求照片的质感及氛围感本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法，其特征在于，所述方法包括：计算二维图像中前景图像的第一法线贴图和光照反射率权值分布图；基于所述第一法线贴图、所述光照反射率权值分布图和第一光源属性信息，对第一图像进行光照渲染处理，所述第一图像包括所述二维图像或所述二维图像对应的三维图像；显示渲染后的所述第一图像。2.根据权利要求1所述的方法，其特征在于，计算所述二维图像中前景图像的第一法线贴图，包括：计算所述二维图像的第二法线贴图；采用所述前景图像的发丝分割图像对所述第二法线贴图进行裁切处理，得到所述第一法线贴图。3.根据权利要求1所述的方法，其特征在于，计算所述二维图像中前景图像的光照反射率权值分布图，包括：识别所述前景图像中的M个元素图像，M为正整数；按照光照反射率权值从元素图像的中间区域向边缘区域递减的方式，设置所述M个元素图像的光照反射率权值，得到所述光照反射率权值分布图；其中，所述各元素图像的中间区域的光照反射率权值由所述各元素图像中的对象元素的元素属性确定。4.根据权利要求1所述的方法，其特征在于，所述第一光源属性信息根据以下至少之一确定：所述第一图像中主光源的光源属性信息，用户输入的输入参数；其中，光源属性信息包括以下至少之一：光源方向、光源位置、光源强度、色温。5.根据权利要求1至4中任一项所述的方法，其特征在于，所述第一图像包括所述二维图像对应的三维图像；所述基于所述第一法线贴图、所述光照反射率权值分布图和第一光源属性信息，对第一图像进行光照渲染处理之前，所述方法还包括：根据所述二维图像的深度估计信息，对所述二维图像进行三维重建处理，得到所述二维图像对应的三维图像。6.根据权利要求5所述的方法，其特征在于，所述根据所述二维图像的深度估计信息，对所述二维图像进行三维重建处理，得到所述二维图像对应的三维图像之前，所述方法还包括：将所述二维图像输入深度估计模型，依次通过所述深度估计模型中的多个特征提取模块计算所述二维图像的深度信息，输出所述二维图像的深度估计信息；其中，各特征提取模块包括相连接的一个卷积层和一个视觉变换Vit模块。7.一种图像处理装置，其特征在于，所述装置包括：处理模块、渲染模块和显示模块；所述处理模块，用于计算二维图像中前景图像的第一法线贴图和光照反射率权值分布图；所述渲染模块，用于基于所述第一法线贴图、所述光照反射率权值分布图和...

【专利技术属性】
技术研发人员：郭桦，
申请(专利权)人：维沃移动通信有限公司，
类型：发明
国别省市：