本申请实施例提供一种图像处理方法、装置及设备，该方法包括：电子设备获取第一图像以及第二图像；确定第一图像的环境光照特征、以及在第一图像中确定目标图像区域；在第一图像中，基于第二图像调整目标图像区域中的图像内容，得到目标纹理渲染图；基于环境光照特征，对目标纹理渲染图进行光照渲染处理，得到目标图像。这样，电子设备可以根据第二图像来调整至第一图像的目标图像区域的图像内容，能够实现图像内容的替换；同时可以通过光照渲染还原第一图像的实际光照，能够提高图像内容替换的真实性，更加自然，进而能够反映第二图像在实际场景中的真实效果，能够更好地满足用户的实际需求，提高了用户的使用体验。提高了用户的使用体验。提高了用户的使用体验。
【技术实现步骤摘要】
图像处理方法、装置及设备
[0001]本申请涉及计算机
，尤其涉及一种图像处理方法、装置及设备。
技术介绍
[0002]随着互联网等技术以及电商平台的不断发展，很多用户在装修时选择从电商平台购买需要放置到房屋室内的装修材料，包括家具(例如沙发)、主材(例如地板、瓷砖或者墙纸)等。
[0003]在相关技术中，电商平台的商品详情页中往往仅显示有商家拍摄的商品大图，无法体现该商品放置或者铺装在用户室内的真实效果。尽管部分电商平台提供了3D样板间的模拟场景，但是该3D样板间并非用户房屋室内的实际场景，仍旧无法满足用户的实际需求，用户使用体验不佳。
技术实现思路
[0004]本申请的多个方面提供一种图像处理方法、装置及设备，能够反映对象在实际场景的真实效果，能够更好地满足用户的实际需求，提高了用户的使用体验。
[0005]第一方面，本申请实施例提供一种图像处理方法，包括：
[0006]获取第一图像以及第二图像；
[0007]确定所述第一图像的环境光照特征、以及在所述第一图像中确定目标图像区域；
[0008]在所述第一图像中，基于所述第二图像调整所述目标图像区域中的图像内容，得到目标纹理渲染图；
[0009]基于所述环境光照特征，对所述目标纹理渲染图进行光照渲染处理，得到目标图像。
[0010]在一种可能的实施方式中，所述确定所述第一图像的环境光照特征、以及在所述第一图像中确定目标图像区域，包括：
[0011]通过预设神经网络模型对所述第一图像进行处理，得到所述环境光照特征以及所述第一图像对应的地面掩膜；
[0012]基于所述地面掩膜以及所述第二图像，确定所述目标图像区域。
[0013]在一种可能的实施方式中，所述在所述第一图像中，基于所述第二图像调整所述目标图像区域中的图像内容，得到目标纹理渲染图，包括：
[0014]确定所述第一图像对应的法向量图、以及确定所述第二图像对应的纹理图像；
[0015]根据所述法向量图以及所述纹理图像，确定中间纹理渲染图；
[0016]在所述第一图像中，将所述目标图像区域中的图像内容替换为所述中间纹理渲染图，得到所述目标纹理渲染图。
[0017]在一种可能的实施方式中，所述根据所述法向量图以及所述纹理图像，确定中间纹理渲染图，包括：
[0018]根据所述法向量图，确定摄像头的方向信息；
[0019]确定所述摄像头的目标拍摄参数；
[0020]基于所述方向信息、预设高度信息以及所述目标拍摄参数，对所述纹理图像进行图像渲染，得到所述中间纹理渲染图。
[0021]在一种可能的实施方式中，所述确定所述摄像头的目标拍摄参数，包括：
[0022]将所述第一图像的实时拍摄参数确定为所述目标拍摄参数；或者，
[0023]根据所述第一图像中包括的图像文件信息，确定所述目标拍摄参数；或者，
[0024]将默认拍摄参数确定为所述目标拍摄参数。
[0025]在一种可能的实施方式中，所述基于所述环境光照特征，对所述目标纹理渲染图进行光照渲染处理，得到目标图像，包括：
[0026]根据所述环境光照特征，确定所述第一图像对应的光照着色图；
[0027]将所述光照着色图与所述目标纹理渲染图进行叠加，得到所述目标图像。
[0028]在一种可能的实施方式中，所述根据所述环境光照特征，确定所述第一图像对应的光照着色图，包括：
[0029]根据所述环境光照特征，确定所述第一图像中每个像素的像素值；
[0030]根据每个像素的像素值，确定所述光照着色图。
[0031]在一种可能的实施方式中，所述根据所述环境光照特征，确定每个像素的像素值，包括：
[0032]将所述环境光照特征在半球面上进行积分处理，得到所述每个像素的像素值；所述环境光照特征用N阶球面高斯和表示；所述N为正整数。
[0033]在一种可能的实施方式中，所述将所述光照着色图与所述目标纹理渲染图进行叠加，得到所述目标图像，包括：
[0034]确定所述光照着色图中每个第一像素的像素值、以及确定所述目标纹理渲染图中每个第二像素的像素值；
[0035]在所述光照着色图以及所述目标纹理渲染图中，确定具备对应关系的第一像素与第二像素；
[0036]在所述目标纹理渲染图中，确定具备对应关系的第一像素与第二像素的像素值乘积，并将所述第二像素的像素值替换为所述像素值乘积，得到所述目标图像。
[0037]在一种可能的实施方式中，所述方法还包括：
[0038]对所述目标图像进行亮度调整，得到待展示图像；所述亮度调整包括以下方式的至少一种：动态范围调整、色调映射以及幂律变换。
[0039]第二方面，本申请实施例提供一种图像处理方法，包括：
[0040]响应于对第一控件输入的触控操作，获取用户上传的第一图像；
[0041]响应于对第二控件输入的触控操作，确定所述第一图像的环境光照特征、以及在所述第一图像中确定目标图像区域；
[0042]获取第二图像，并在所述第一图像中，基于所述第二图像调整所述目标图像区域中的图像内容，得到目标纹理渲染图；
[0043]基于所述环境光照特征，对所述目标纹理渲染图进行光照渲染处理，得到并显示目标图像。
[0044]第三方面，本申请实施例提供一种图像处理装置，包括：
[0045]获取模块，用于获取第一图像以及第二图像；
[0046]确定模块，用于确定所述第一图像的环境光照特征、以及在所述第一图像中确定目标图像区域；
[0047]调整模块，用于在所述第一图像中，基于所述第二图像调整所述目标图像区域中的图像内容，得到目标纹理渲染图；
[0048]处理模块，用于基于所述环境光照特征，对所述目标纹理渲染图进行光照渲染处理，得到目标图像。
[0049]在一种可能的实施方式中，所述确定模块，具体用于：
[0050]通过预设神经网络模型对所述第一图像进行处理，得到所述环境光照特征以及所述第一图像对应的地面掩膜；
[0051]基于所述地面掩膜以及所述第二图像，确定所述目标图像区域。
[0052]在一种可能的实施方式中，所述调整模块，具体用于：
[0053]确定所述第一图像对应的法向量图、以及确定所述第二图像对应的纹理图像；
[0054]根据所述法向量图以及所述纹理图像，确定中间纹理渲染图；
[0055]在所述第一图像中，将所述目标图像区域中的图像内容替换为所述中间纹理渲染图，得到所述目标纹理渲染图。
[0056]在一种可能的实施方式中，所述调整模块，具体用于：
[0057]根据所述法向量图，确定摄像头的方向信息；
[0058]确定所述摄像头的目标拍摄参数；
[0059]基于所述方向信息、预设高度信息以及所述目标拍摄参数，对所述纹理图像进行图像渲染，得到所述中间纹本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：获取第一图像以及第二图像；确定所述第一图像的环境光照特征、以及在所述第一图像中确定目标图像区域；在所述第一图像中，基于所述第二图像调整所述目标图像区域中的图像内容，得到目标纹理渲染图；基于所述环境光照特征，对所述目标纹理渲染图进行光照渲染处理，得到目标图像。2.根据权利要求1所述的方法，其特征在于，所述确定所述第一图像的环境光照特征、以及在所述第一图像中确定目标图像区域，包括：通过预设神经网络模型对所述第一图像进行处理，得到所述环境光照特征以及所述第一图像对应的地面掩膜；基于所述地面掩膜以及所述第二图像，确定所述目标图像区域。3.根据权利要求1或2所述的方法，其特征在于，所述在所述第一图像中，基于所述第二图像调整所述目标图像区域中的图像内容，得到目标纹理渲染图，包括：确定所述第一图像对应的法向量图、以及确定所述第二图像对应的纹理图像；根据所述法向量图以及所述纹理图像，确定中间纹理渲染图；在所述第一图像中，将所述目标图像区域中的图像内容替换为所述中间纹理渲染图，得到所述目标纹理渲染图。4.根据权利要求3所述的方法，其特征在于，所述根据所述法向量图以及所述纹理图像，确定中间纹理渲染图，包括：根据所述法向量图，确定摄像头的方向信息；确定所述摄像头的目标拍摄参数；基于所述方向信息、预设高度信息以及所述目标拍摄参数，对所述纹理图像进行图像渲染，得到所述中间纹理渲染图。5.根据权利要求4所述的方法，其特征在于，所述确定所述摄像头的目标拍摄参数，包括：将所述第一图像的实时拍摄参数确定为所述目标拍摄参数；或者，根据所述第一图像中包括的图像文件信息，确定所述目标拍摄参数；或者，将默认拍摄参数确定为所述目标拍摄参数。6.根据权利要求1至5任一项所述的方法，其特征在于，所述基于所述环境光照特征，对所述目标纹理渲染图进行光照渲染处理，得到目标图像，包括：根据所述环境光照特征，确定所述第一图像对应的光照着色图；将所述光照着色图与所述目标纹理渲染图进行叠加，得到所述目标图像。7.根据权利要求6所述的方法，其特征在于，所述根据所述环境光照特征，确定所述第一图像对应的光照着色图，包括：根据所述环境光照特征，确定所述第一图像中每个像素的像素值；根据每个像素的像素值，确定所述...
【专利技术属性】
技术研发人员：宋瑾，马林，费义云，胡晓航，黄若慧，
申请(专利权)人：阿里巴巴中国有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。