一种隐私保护方法、装置、设备及介质制造方法及图纸

本申请公开了一种隐私保护方法、装置、设备及介质，由于本申请实施例中，在将基于包含用户的原始RGB图像以及用户对应的掩膜图像生成的RGBA图像上传到云端服务器之前，先将原始RGB图像中的背景区域替换成预设的背景，进而保护了用户背景隐私，降低了隐私泄露的风险。降低了隐私泄露的风险。降低了隐私泄露的风险。

【技术实现步骤摘要】
一种隐私保护方法、装置、设备及介质


[0001]本申请涉及图像处理
，尤其涉及一种隐私保护方法、装置、设备及介质。

技术介绍

[0002]伴随着虚拟现实技术的快速发展，远程多人虚拟会议、虚拟合照、虚拟舞台等丰富了人们的生活，且在远程多人虚拟会议、虚拟合照、虚拟舞台的过程中，需要将多个人合成在同一个背景中。
[0003]现有技术中，在将多个人合成在同一个背景的过程中，需要在设备端获得用户的原始RGB图像以及用户对应的掩膜图像(MASK)，并基于该用户的RGB图像以及掩膜图像获得RGBA图像，将该RGBA图像上传到云端服务器，使得云端服务器基于各用户的RGBA图像，将该多个用户的图像合成在同一个背景中。由于通过图像分解可以从RGBA图像中解析出原始RGB图像，且该原始RGB图像中携带用户所处的真实环境信息，也就是说原始RGB图像中包含真实的背景信息，无法保证用户背景隐私，存在隐私泄露的风险。

技术实现思路

[0004]本申请提供了一种隐私保护方法、装置、设备及介质，用以解决现有技术中直接基于包含背景区域的原始RGB图像以及对应的掩模图像生成的RGBA，无法保证用户背景隐私，存在隐私泄露的危险的问题。
[0005]本申请提供了一种隐私保护方法，所述方法包括：
[0006]获得包含用户的原始RGB图像，并基于人像分割算法，获得所述用户对应的掩模图像；
[0007]根据所述原始RGB图像、所述掩模图像以及目标背景图像，确定将所述原始RGB图像中的背景区域替换为所述目标背景图像对应的区域得到的目标RGB图像；
[0008]基于所述目标RGB图像以及所述掩膜图像，获得目标RGBA图像。
[0009]本申请提供了一种隐私保护装置，所述装置包括：
[0010]获取模块，用于获得包含用户的原始RGB图像，并基于人像分割算法，获得所述用户对应的掩模图像；
[0011]替换模块，用于根据所述原始RGB图像、所述掩模图像以及目标背景图像，确定将所述原始RGB图像中的背景区域替换为所述目标背景图像对应的区域得到的目标RGB图像；
[0012]处理模块，用于基于所述目标RGB图像以及所述掩膜图像，获得目标RGBA图像。
[0013]本申请还提供了一种电子设备，所述电子设备至少包括处理器和存储器，所述处理器用于执行存储器中存储的计算机程序时实现如上述任一所述隐私保护方法的步骤。
[0014]本申请还提供了一种计算机可读存储介质，其存储有计算机程序，所述计算机程序被处理器执行时实现如上述任一所述隐私保护方法的步骤。
[0015]本申请实施例中，获得包含用户的原始RGB图像，并基于人像分割算法，获得该用户对应的掩模图像，根据该原始RGB图像、该掩模图像以及目标背景图像，确定将该原始RGB
图像中的背景区域替换为该目标背景图像对应的区域得到的目标RGB图像，基于该目标RGB图像以及该掩膜图像，获得目标RGBA图像。由于本申请实施例中，在将基于包含用户的原始RGB图像以及用户对应的掩膜图像生成的RGBA图像上传到云端服务器之前，先将原始RGB图像中的背景区域替换成预设的背景，进而保护了用户背景隐私，降低了隐私泄露的风险。
附图说明
[0016]为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
[0017]图1为本申请一些实施例提供的一种隐私保护方法的过程示意图；
[0018]图2a为相关技术中合成RGBA图像的显示示意图；
[0019]图2b为相关技术中基于RGBA分解的显示示意图；
[0020]图3a为本申请一些实施例提供的一种有利于隐私保护的合成RGBA图像的显示示意图；
[0021]图3b为本申请一些实施例提供的一种有利于隐私保护的合成RGBA图像分解的显示示意图；
[0022]图4a为相关技术中的一种人像分割与合成的过程示意图；
[0023]图4b为本申请一些实施例中提供的一种人像分割与合成的过程示意图；
[0024]图5为本申请一些实施例提供的一种隐私保护装置结构示意图；
[0025]图6为本申请一些实施例提供的一种电子设备的结构示意图。
具体实施方式
[0026]为了使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请作进一步地详细描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本申请保护的范围。
[0027]本申请实施例中，获得包含用户的原始RGB图像，并基于人像分割算法，获得该用户对应的掩模图像，根据该原始RGB图像、该掩模图像以及目标背景图像，确定将该原始RGB图像中的背景区域替换为该目标背景图像对应的区域得到的目标RGB图像，基于该目标RGB图像以及该掩膜图像，获得目标RGBA图像。由于本申请实施例中，在将基于包含用户的原始RGB图像以及用户对应的掩膜图像生成的RGBA图像上传到云端服务器之前，先将原始RGB图像中的背景区域替换成预设的背景，进而保护了用户背景隐私，降低了隐私泄露的风险。
[0028]为了保护用户背景隐私，降低隐私泄露的风险，本申请实施例提供了一种隐私保护方法、装置、设备及介质。
[0029]图1为本申请一些实施例提供的一种隐私保护方法的过程示意图，该过程包括以下步骤：
[0030]S101：获得包含用户的原始RGB图像，并基于人像分割算法，获得所述用户对应的掩模图像。
[0031]本申请实施例提供的隐私保护方法应用于电子设备，该电子设备可以是智能终端、PC或者服务器等设备。
[0032]在存在将多人图像合成在同一个背景的需求时，比如，多人虚拟会议、虚拟合照、虚拟舞台等，电子设备则需要针对每个进行合成的用户，获得包含该用户的原始RGB图像，其中，该用户为需要合成在同一背景中的任一用户，其中，该原始RGB图像中可能包含一个用户也可能包含多个用户。在获得该包含用户的原始RGB图像后，在本申请中，基于该原始RGB图像以及人像分割算法，获得该用户对应的掩膜图像。
[0033]具体的，通过该人像分割算法获得所述用户对应的掩模图像时，可以基于一个encoder
‑
decoder模型实现，该模型中包括细节特征提取模块、全局特征提取模块、特征融合模块和像素分类模块，在获得该用户对应的掩模图像的过程中，先将该原始RGB图像输入到该模型中，细节特征提取模块对该原始RGB图像进行二维卷积(Conv2D)以及深度可分离卷积(DSConv)处理，得到第一特征图，全局特征模块对该第一特征图进行一些列的卷积、上采样等操作得到第二特征图，该特征融合模块对该第二特征图以及第本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种隐私保护方法，其特征在于，所述方法包括：获得包含用户的原始RGB图像，并基于人像分割算法，获得所述用户对应的掩模图像；根据所述原始RGB图像、所述掩模图像以及目标背景图像，确定将所述原始RGB图像中的背景区域替换为所述目标背景图像对应的区域得到的目标RGB图像；基于所述目标RGB图像以及所述掩膜图像，获得目标RGBA图像。2.根据权利要求1所述的方法，其特征在于，所述根据该原始RGB图像、该掩模图像以及目标背景图像，确定将该原始RGB图像中的背景区域替换为所述目标背景图像对应的区域得到的目标RGB图像包括：针对每个像素点，根据I＝α*f+(1
‑
α)*b，确定该像素点对应的目标像素值，其中，所述α为该掩模图像中该像素点对应的像素值，f为该原始RGB图像中该像素点的像素值，b为目标背景图像中该像素点对应的像素值；根据每个像素点对应的目标像素值，确定对应的目标RGB图像。3.根据权利要求1所述的方法，其特征在于，所述基于所述目标RGB图像以及所述掩膜图像，获得目标RGBA图像包括：根据所述目标RGB图像包含的像素点在各通道中的像素值、所述掩膜图像包含的像素点的像素值以及预设的函数，获得每个像素点对应的目标像素值；根据所述每个像素点对应的目标像素值，确定目标RGBA图像。4.根据权利要求3所述的方法，其特征在于，所述根据该目标RGB图像包含的像素点在各通道中的像素值、该掩膜图像包含的像素点的像素值以及预设的函数，获得每个像素点对应的目标像素值包括：针对每个像素点，根据所述目标RGB图像中该像素点每个通道的像素值所述掩膜图像中该像素点的像素值、每个通道对应的权重值及所述掩膜图像对应的权重值，确定该像素点对应的权重和，并将该权重和确定为该像素点对应的目标像素值。5.一种隐私保护装置，其特征在于，所述装置包括：获取模...

【专利技术属性】
技术研发人员：刘帅帅，马琳杰，杨雪洁，孙萁浩，张振铎，顾庆涛，高雪松，陈维强，
申请(专利权)人：海信集团控股股份有限公司，
类型：发明
国别省市：