本发明专利技术涉及人工智能技术，公开了一种基于智能相框的被遮挡物修正方法，包括：识别部分遮挡图像的画面场景并标注部分遮挡图像内的遮挡区域，根据画面场景计算遮挡区域的对称系数；对部分遮挡图像进行下采样及转置卷积，得到第一修正图像；根据对称系数对第一修正图像进行像素修正，得到第二修正图像；分析第一全局特征语义与部分遮挡图像的局部特征语义的局部一致性；当全局一致性与局部一致性之和小于或等于预设阈值时，返回对部分遮挡图像进行单次下采样的步骤；当其大于预设阈值时，对遮挡区域的边界像素进行像素融合。本发明专利技术还提出一种基于智能相框的被遮挡物修正装置、设备及介质。本发明专利技术可以提高图像修正精确度。本发明专利技术可以提高图像修正精确度。本发明专利技术可以提高图像修正精确度。
【技术实现步骤摘要】
基于智能相框的被遮挡物修正方法、装置、设备及介质
[0001]本专利技术涉及人工智能
，尤其涉及一种基于智能相框的被遮挡物修正方法、装置、电子设备及计算机可读存储介质。
技术介绍
[0002]随着智慧生活领域的科技迅速发展，越来越多的人们使用智能化设备来让生活更加便捷、多彩。例如，人们越来越常见使用智能相框对照片进行多样化的展示。同时，智能相框也具备着越来越多的图像处理功能，例如，可实现对照片的美化、修正等。
[0003]但现有方法在对图像进行修正时，往往是基于像素的再填充，即根据当前图像进行分析，以识别除图像内的像素分布特点，并根据该分布特点对遮挡区域的像素进行预测，进而实现对遮挡区域的修正。但实际场景中，由于图像的复杂性，仅依靠像素分布分析进行图像修正，会导致修正的精确度较低。
技术实现思路
[0004]本专利技术提供一种基于智能相框的被遮挡物修正方法、装置及计算机可读存储介质，其主要目的在于解决进行图像修正时的精确度较低的问题。
[0005]为实现上述目的，本专利技术提供的一种基于智能相框的被遮挡物修正方法，包括：获取智能相框内展示的部分遮挡图像，识别所述部分遮挡图像的画面场景；通过双重反馈的方式标注所述部分遮挡图像内的遮挡区域，并根据所述画面场景计算所述遮挡区域的对称系数；对所述部分遮挡图像进行单次下采样，并对单次下采样生成的采样图像进行转置卷积，得到第一修正图像；根据所述对称系数对所述第一修正图像内的遮挡区域进行像素修正，得到第二修正图像；利用空洞卷积提取所述第二修正图像的第一全局特征语义，以及利用所述空洞卷积提取所述部分遮挡图像的第二全局特征语义，以及利用所述空洞卷积提取所述第二修正图像内的遮挡区域的局部特征语义；计算所述第一全局特征语义与所述第二全局特征语义的全局一致性，以及计算所述第一全局特征语义与所述局部特征语义的局部一致性；当所述全局一致性与所述局部一致性之和小于或等于预设阈值时，返回对所述部分遮挡图像进行单次下采样的步骤；当所述全局一致性与所述局部一致性之和大于所述预设阈值时，对所述第二修正图像内的遮挡区域的边界像素进行像素融合，得到所述部分遮挡图像的修复图像所述修复图像的完整度大于所述部分遮挡图像的完整度。
[0006]可选地，所述通过双重反馈的方式标注所述部分遮挡图像内的遮挡区域，包括：利用预先训练的图像标注模型对所述部分遮挡图像进行区域框选，得到预测框选
区；将所述预测框选区发送至预设的标注人员，并获取所述预设的标注人员对所述预测框选区的反馈意见；根据所述反馈意见对所述预测框选区进行边界调整，得到所述部分遮挡图像内的遮挡区域。
[0007]可选地，所述根据所述画面场景计算所述遮挡区域的对称系数，包括：根据所述场景画面的场景标签查询与所述场景画面相对应的中轴线倾斜角；截取所述遮挡区域外围预设像素范围的外围区域；按照所述中轴线倾斜角构建对称轴，并按照所述对称轴将所述外围区域划分为两块镜像区域；计算所述两块镜像区域之间的像素分布相似度，并确定所述像素分布相似度为所述遮挡区域的对称系数。
[0008]可选地，所述根据所述对称系数对所述第一修正图像内的遮挡区域进行像素修正，得到第二修正图像，包括：逐个选取所述第一修正图像内的遮挡区域中的各个像素点为第一像素点，对各个所述第一像素点进行像素调整处理，得到所述第二修正图像；其中，所述像素调整处理包括：选取以所述对称轴与所述第一像素点相对称的像素点为第二像素点；计算所述第一像素点与所述第二像素点的像素差值，并计算所述像素差值与所述对称系数的乘积；利用所述乘积对所述第一像素点与所述第二像素点的像素值进行调整，直至所述遮挡区域所有像素点被调整完成。
[0009]可选地，所述对所述部分遮挡图像进行单次下采样，并对单次下采样生成的采样图像进行转置卷积，得到第一修正图像，包括：统计所述部分遮挡图像的图像面积，以及统计所述遮挡区域的遮挡面积；计算所述遮挡面积与所述图像面积的比值，得到缩放比例；按照预设的采样步长对所述部分遮挡图像进行单次下采样，得到采样图像；按照所述缩放比例对所述采用图像进行转置卷积，得到所述第一修正图像。
[0010]可选地，所述利用空洞卷积提取所述第二修正图像的第一全局特征语义，包括：按照预设空洞率对所述第二修正图像进行预设次数的卷积，得到卷积图像；对所述卷积图像进行池化及全连接处理，得到全连接特征；利用预设的激活函数将所述全连接特征进行语义映射，得到所述第一全局特征语义。
[0011]可选地，所述对所述第二修正图像内的遮挡区域的边界像素进行像素融合，包括：计算所述第二修正图像内除所述遮挡区域外的全局像素梯度；按照所述全局像素梯度求解如下泊松等式得到所述完整图像：
其中，为所述完整图像，为所述第二修正图像，为所述全局像素梯度，为所述完整图像的一阶梯度，为所述遮挡区域，为所述遮挡区域外围预设范围内的像素区域。
[0012]为了解决上述问题，本专利技术还提供一种基于智能相框的被遮挡物修正装置，所述装置包括：图像分析模块，用于获取智能相框内展示的部分遮挡图像，识别所述部分遮挡图像的画面场景，通过双重反馈的方式标注所述部分遮挡图像内的遮挡区域，并根据所述画面场景计算所述遮挡区域的对称系数；第一修正模块，用于对所述部分遮挡图像进行单次下采样，并对单次下采样生成的采样图像进行转置卷积，得到第一修正图像，根据所述对称系数对所述第一修正图像内的遮挡区域进行像素修正，得到第二修正图像；语义分析模块，用于利用空洞卷积提取所述第二修正图像的第一全局特征语义，以及利用所述空洞卷积提取所述部分遮挡图像的第二全局特征语义，以及利用所述空洞卷积提取所述第二修正图像内的遮挡区域的局部特征语义；第二修正模块，用于计算所述第一全局特征语义与所述第二全局特征语义的全局一致性，以及计算所述第一全局特征语义与所述局部特征语义的局部一致性，当所述全局一致性与所述局部一致性之和小于或等于预设阈值时，返回对所述部分遮挡图像进行单次下采样的步骤，当所述全局一致性与所述局部一致性之和大于所述预设阈值时，对所述第二修正图像内的遮挡区域的边界像素进行像素融合，得到所述部分遮挡图像的修复图像所述修复图像的完整度大于所述部分遮挡图像的完整度。
[0013]为了解决上述问题，本专利技术还提供一种电子设备，所述电子设备包括：至少一个处理器；以及，与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器能够执行上述所述的基于智能相框的被遮挡物修正方法。
[0014]为了解决上述问题，本专利技术还提供一种计算机可读存储介质，所述计算机可读存储介质中存储有至少一个计算机程序，所述至少一个计算机程序被电子设备中的处理器执行以实现上述所述的基于智能相框的被遮挡物修正方法。
[0015]本专利技术实施例通过双重反馈的方式标注出遮挡区域在提升标注效率的同时，提升了标注的精确度，进而提升后续图像修正的精确度；根据所述画面场景分析所述遮挡区域的对称系数本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种基于智能相框的被遮挡物修正方法，其特征在于，所述方法包括：获取智能相框内展示的部分遮挡图像，识别所述部分遮挡图像的画面场景；通过双重反馈的方式标注所述部分遮挡图像内的遮挡区域，并根据所述画面场景计算所述遮挡区域的对称系数；对所述部分遮挡图像进行单次下采样，并对单次下采样生成的采样图像进行转置卷积，得到第一修正图像；根据所述对称系数对所述第一修正图像内的遮挡区域进行像素修正，得到第二修正图像；利用空洞卷积提取所述第二修正图像的第一全局特征语义，以及利用所述空洞卷积提取所述部分遮挡图像的第二全局特征语义，以及利用所述空洞卷积提取所述第二修正图像内的遮挡区域的局部特征语义；计算所述第一全局特征语义与所述第二全局特征语义的全局一致性，以及计算所述第一全局特征语义与所述局部特征语义的局部一致性；当所述全局一致性与所述局部一致性之和小于或等于预设阈值时，返回对所述部分遮挡图像进行单次下采样的步骤；当所述全局一致性与所述局部一致性之和大于所述预设阈值时，对所述第二修正图像内的遮挡区域的边界像素进行像素融合，得到所述部分遮挡图像的修复图像所述修复图像的完整度大于所述部分遮挡图像的完整度。2.如权利要求1所述的基于智能相框的被遮挡物修正方法，其特征在于，所述通过双重反馈的方式标注所述部分遮挡图像内的遮挡区域，包括：利用预先训练的图像标注模型对所述部分遮挡图像进行区域标注，得到预测框选区；将所述预测框选区发送至预设的标注人员，并获取所述预设的标注人员对所述预测框选区的反馈意见；根据所述反馈意见对所述预测框选区进行边界调整，得到所述部分遮挡图像内的遮挡区域。3.如权利要求1所述的基于智能相框的被遮挡物修正方法，其特征在于，所述根据所述画面场景计算所述遮挡区域的对称系数，包括：根据所述场景画面的场景标签，查询与所述场景画面相对应的中轴线倾斜角；截取所述遮挡区域外围预设像素范围的外围区域；按照所述中轴线倾斜角构建对称轴，并按照所述对称轴将所述外围区域划分为两块镜像区域；计算所述两块镜像区域之间的像素分布相似度，并确定所述像素分布相似度为所述遮挡区域的对称系数。4.如权利要求3所述的基于智能相框的被遮挡物修正方法，其特征在于，所述根据所述对称系数对所述第一修正图像内的遮挡区域进行像素修正，得到第二修正图像，包括：逐个选取所述第一修正图像内的遮挡区域中的各个像素点为第一像素点，对各个所述第一像素点进行像素调整处理，得到所述第二修正图像；其中，所述像素调整处理包括：选取以所述对称轴与所述第一像素点相对称的像素点为第二像素点；计算所述第一像素点与所述第二像素点的像素差值，并计算所述像素差值与所述对称
系数的乘积；利用所述乘积对所述第一像素点与所述第二像素点的像素值进行调整，直至所述遮挡区域所有像素点被调整完成。5.如权利要求1所述的基于智能相框的被遮挡物修正方法，其特征在于，所述对所述部分遮挡图像进行单次下采样，并对单次下采样生成的采样图像进行转置卷积，得到第一修正图像，包括：统计所述...
【专利技术属性】
技术研发人员：李莹莹，
申请(专利权)人：深圳憨厚科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。