图像处理的方法、装置及电子设备制造方法及图纸

本公开公开了一种图像处理的方法、装置及电子设备，涉及计算机视觉领域，具体涉及增强现实技术领域。具体实现方案为：根据待处理图像帧中的线条特征确定待处理区域；根据所述待处理图像帧建立空间模型；根据所述空间模型在所述待处理区域中嵌入待嵌入特效素材，以生成特效图像帧。本公开实施例可以识别待处理图像帧中的待处理区域，并在所述待处理区域中增加待嵌入特效素材。通过所述区域标签获取所述相似待处理区域实现了不同待处理图像帧中同一待处理区域的追踪，减少了图像处理的计算量，提高了待处理图像帧嵌入待嵌入特效的效率。提高了待处理图像帧嵌入待嵌入特效的效率。提高了待处理图像帧嵌入待嵌入特效的效率。

【技术实现步骤摘要】
图像处理的方法、装置及电子设备


[0001]本公开涉及计算机视觉领域，具体涉及增强现实
，尤其涉及一种图像处理的方法、装置及电子设备。

技术介绍

[0002]增强现实(Augmented Reality，AR)技术。近年来，AR设备的应用领域越来越广，对AR设备呈现的增强现实场景的效果的优化也愈发重要。
[0003]目前AR特效的嵌入需要专业特效软件需要一定的学习成本，大部分用户不会使用。且特效嵌入的步骤繁琐，耗时长，不智能。目前尚缺乏高效的特效素材嵌入方案。

技术实现思路

[0004]本公开提供了一种图像处理的方法、装置及电子设备。
[0005]根据本公开的第一方面，提供了一种图像处理的方法，包括：
[0006]根据待处理图像帧中的线条特征确定待处理区域；
[0007]根据所述待处理图像帧建立空间模型；
[0008]根据所述空间模型在所述待处理区域中嵌入待嵌入特效素材，以生成特效图像帧。
[0009]可选地，所述根据所述空间模型在所述待处理区域中嵌入待嵌入特效素材，包括：
[0010]确定所述待处理区域在所述空间模型中对应的待处理空间区域；
[0011]将所述待嵌入特效素材嵌入所述待处理空间区域。
[0012]可选地，还包括：
[0013]根据所述待处理空间区域的类型确定所述待嵌入特效素材；
[0014]和/或，
[0015]根据待处理区域确定对应的建筑类型；基于所述建筑类型确定所述待嵌入特效素材。
[0016]可选地，所述待嵌入特效素材与所述待处理空间区域或所述待处理区域的尺寸对应。
[0017]可选地，还包括：
[0018]在所述待处理图像帧与上一个待处理图像帧不同时，获取所述待处理区域图像的区域标签；
[0019]根据所述区域标签识别前一待处理图像帧中的第二待处理区域，所述第二待处理区域与所述待处理区域的所述区域标签相同；
[0020]将所述第二待处理区域对应的第二待嵌入特效素材嵌入所述待处理区域。
[0021]可选地，所述根据所述待处理图像帧建立空间模型，包括：
[0022]生成所述线条特征上像素点对应的三维坐标；
[0023]根据所述三维坐标建立所述空间模型，所述空间模型为三维模型。
[0024]可选地，所述特效素材包括以下的至少一种：
[0025]二维特效素材；
[0026]三维特效素材。
[0027]根据本公开的第二方面，提供了一种图像处理的装置，包括：
[0028]待处理区域确定模块，用于根据待处理图像帧中的线条特征确定待处理区域；
[0029]模型建立模块，用于根据所述待处理图像帧建立空间模型；
[0030]特效嵌入模块，用于根据所述空间模型在所述待处理区域中嵌入待嵌入特效素材，以生成特效图像帧。
[0031]可选地，所述特效嵌入模块，包括：
[0032]空间确定子模块，用于确定所述待处理区域在所述空间模型中对应的待处理空间区域；
[0033]第一特效嵌入子模块，用于将所述待嵌入特效素材嵌入所述待处理空间区域。
[0034]可选地，还包括：
[0035]特效确定子模块，用于根据所述待处理空间区域的类型确定所述待嵌入特效素材；
[0036]和/或，
[0037]根据待处理区域确定对应的建筑类型；
[0038]基于所述建筑类型确定所述待嵌入特效素材。
[0039]可选地，所述待嵌入特效素材与所述待处理空间区域或所述待处理区域的尺寸对应。
[0040]可选地，还包括：
[0041]标签获取子模块，用于在所述待处理图像帧与上一个待处理图像帧不同时，获取所述待处理区域图像的区域标签；
[0042]标签对比子模块，用于根据所述区域标签识别前一待处理图像帧中的第二待处理区域，所述第二待处理区域与所述待处理区域的所述区域标签相同；
[0043]第二特效嵌入子模块，用于将所述第二待处理区域对应的第二待嵌入特效素材嵌入所述待处理区域。
[0044]可选地，所述模型建立模块，包括：
[0045]坐标获取子模块，用于生成所述线条特征上像素点对应的三维坐标；
[0046]模型建立子模块，用于根据所述三维坐标建立所述空间模型，所述空间模型为三维模型。
[0047]可选地，所述特效素材包括以下的至少一种：
[0048]二维特效素材；
[0049]三维特效素材。
[0050]根据本公开的第三方面，提供了一种电子设备，包括：
[0051]至少一个处理器；以及
[0052]与所述至少一个处理器通信连接的存储器；其中，
[0053]所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行所述第一方面中任一项所述的方法。
[0054]根据本公开的第四方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据所述第一方面中任一项所述的方法。
[0055]根据本公开的第五方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现根据所述第一方面中任一项所述的方法。
[0056]本公开具有以下有益效果：
[0057]通过所述区域标签获取所述相似待处理区域实现了不同待处理图像帧中同一待处理区域的追踪，减少了图像处理的计算量，提高了待处理图像帧嵌入待嵌入特效的效率。
[0058]应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0059]附图用于更好地理解本方案，不构成对本公开的限定。其中：
[0060]图1是根据本公开实施例提供的一种图像处理方法的流程示意图；
[0061]图2是根据本公开实施例提供的一种图像处理方法的流程示意图；
[0062]图3是根据本公开实施例提供的一种图像处理方法的流程示意图；
[0063]图4是根据本公开实施例提供的一种图像处理方法的流程示意图；
[0064]图5是根据本公开实施例提供的一种图像处理装置的结构示意图；
[0065]图6是根据本公开实施例提供的一种图像处理装置的结构示意图；
[0066]图7是根据本公开实施例提供的一种图像处理装置的结构示意图；
[0067]图8是根据本公开实施例提供的一种图像处理装置的结构示意图；
[0068]图9是用来实现本公开实施例的图像处理方法的电子设备的框图；
[0069]图10是本公开实施例提供的一种待处理图像帧示意图；
[0070]图11是本公开实施例提供的一种特效图像帧示意图。
具体实施方式
[00本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：根据待处理图像帧中的线条特征确定待处理区域；根据所述待处理图像帧建立空间模型；根据所述空间模型在所述待处理区域中嵌入待嵌入特效素材，以生成特效图像帧。2.根据权利要求1所述的方法，其特征在于，所述根据所述空间模型在所述待处理区域中嵌入待嵌入特效素材，包括：确定所述待处理区域在所述空间模型中对应的待处理空间区域；将所述待嵌入特效素材嵌入所述待处理空间区域。3.根据权利要求1或2所述的方法，其特征在于，还包括：根据所述待处理空间区域的类型确定所述待嵌入特效素材；和/或，根据待处理区域确定对应的建筑类型；基于所述建筑类型确定所述待嵌入特效素材。4.根据权利要求1或2所述的方法，其特征在于，所述待嵌入特效素材与所述待处理空间区域或所述待处理区域的尺寸对应。5.根据权利要求1或2所述的方法，其特征在于，还包括：在所述待处理图像帧与上一个待处理图像帧不同时，获取所述待处理区域图像的区域标签；根据所述区域标签识别前一待处理图像帧中的第二待处理区域，所述第二待处理区域与所述待处理区域的所述区域标签相同；将所述第二待处理区域对应的第二待嵌入特效素材嵌入所述待处理区域。6.根据权利要求1或2所述的方法，其特征在于，所述根据所述待处理图像帧建立空间模型，包括：生成所述线条特征上像素点对应的三维坐标；根据所述三维坐标建立所述空间模型，所述空间模型为三维模型。7.根据权利要求1所述的方法，其特征在于，所述待嵌入特效素材包括以下的至少一种：二维特效素材；三维特效素材。8.一种图像处理装置，包括：待处理区域确定模块，用于根据待处理图像帧中的线条特征确定待处理区域；模型建立模块，用于根据所述待处理图像帧建立空间模型；特效嵌入模块，用于根据所述空间模型在所述待处理区域中嵌入待嵌入特效素材，以生成特效图像帧。9.根据权利要求8所述的装置，其特征在于，所述特效嵌入模块，包括：空间确定子模块，用于确定所述待处理区域在所述空间模型中对应的待处理空间区域；...

【专利技术属性】
技术研发人员：孙阳，杜俊增，
申请(专利权)人：北京小米移动软件有限公司，
类型：发明
国别省市：