图像处理方法和装置、存储介质、电子设备制造方法及图纸

本申请涉及一种图像处理方法和装置、电子设备、计算机可读存储介质，获取待处理图像，从待处理图像中确定待处理区域，根据风格迁移模型对待处理图像中的待处理区域进行风格迁移处理得到风格迁移处理后的图像。其中，风格迁移模型部署在电子设备的相机中。输出风格迁移处理后的图像。首先确定了待处理图像中的待处理区域，从而可以针对性地对待处理区域进行风格迁移处理，不需要对整个图像都进行风格迁移处理，所以大大提高了处理速度。其次因为风格迁移模型部署在电子设备的相机中，因此可以实时对电子设备的相机预览界面中的待处理区域进行风格迁移处理，更加快捷高效，减少图像处理的等待时间。

Image processing method and device, storage medium and electronic equipment

【技术实现步骤摘要】
图像处理方法和装置、存储介质、电子设备
本申请涉及计算机
，特别是涉及一种图像处理方法和装置、存储介质、电子设备。
技术介绍
随着移动终端的普及和移动互联网的迅速发展，移动终端的用户使用量越来越大。移动终端中的拍照功能已经成为用户常用功能之一。且用户对拍照功能的需求越来越多，基本的拍照功能已经不能够满足用户日益增加的需求。
技术实现思路
本申请实施例提供一种图像处理方法和装置、存储介质、电子设备，可以对图像进行各种各样风格的转换。一种图像处理方法，包括：获取待处理图像；从所述待处理图像中确定待处理区域；根据风格迁移模型对所述待处理图像中的待处理区域进行风格迁移处理，得到风格迁移处理后的图像，其中，所述风格迁移模型部署在电子设备的相机中；输出所述风格迁移处理后的图像。一种图像处理装置，所述装置包括：待处理图像获取模块，用于获取待处理图像；待处理区域确定模块，用于从所述待处理图像中确定待处理区域；风格迁移处理模块，用于根据风格迁移模型对所述待处理图像中的待处理区域进行风格迁移处理，得到风格迁移处理后的图像，其中，所述风格迁移模型部署在电子设备的相机中；图像输出模块，用于输出所述风格迁移处理后的图像。一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如上所述的图像处理方法的步骤。一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时执行如上所述的图像处理方法的步骤。上述图像处理方法和装置、存储介质、电子设备，获取待处理图像，从待处理图像中确定待处理区域，根据风格迁移模型对待处理图像中的待处理区域进行风格迁移处理得到风格迁移处理后的图像。其中，风格迁移模型部署在电子设备的相机中。输出风格迁移处理后的图像。首先确定了待处理图像中的待处理区域，从而可以针对性地对待处理区域进行风格迁移处理，不需要对整个图像都进行风格迁移处理。如此可以满足用户的个性化需求，且因为只是对待处理图像的局部进行风格迁移处理，所以大大提高了处理速度。其次因为风格迁移模型部署在电子设备的相机中，因此可以实时对电子设备的相机预览界面中的待处理区域进行风格迁移处理，从而在预览界面就可以实时显示风格迁移后的图像以供用户选用。相比于传统技术在应用程序中才能实现对待处理图像进行风格迁移处理来说，更加快捷高效，减少图像处理的等待时间。附图说明为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为一个实施例中电子设备的内部结构图；图2为一个实施例中图像处理方法的流程图；图3为图2中对从待处理图像中确定待处理区域方法的流程图；图4为一个实施例中风格迁移模型的训练过程的示意图；图5为一个实施例中风格迁移模型的示意图；图6为图2中根据风格迁移模型对待处理图像中的待处理区域进行风格迁移处理方法的流程图；图7为一个实施例中图像处理装置的结构示意图；图8为又一个实施例中图像处理装置的结构示意图；图9为一个实施例中提供的电子设备相关的手机的部分结构的框图。具体实施方式为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。图1为一个实施例中电子设备的内部结构示意图。如图1所示，该电子设备包括通过系统总线连接的处理器、存储器和网络接口。其中，该处理器用于提供计算和控制能力，支撑整个电子设备的运行。存储器用于存储数据、程序等，存储器上存储至少一个计算机程序，该计算机程序可被处理器执行，以实现本申请实施例中提供的适用于电子设备的场景识别方法。存储器可包括磁碟、光盘、只读存储记忆体(Read-OnlyMemory，ROM)等非易失性存储介质，或随机存储记忆体(Random-Access-Memory，RAM)等。例如，在一个实施例中，存储器包括非易失性存储介质及内存储器。非易失性存储介质存储有操作系统和计算机程序。该计算机程序可被处理器所执行，以用于实现以下各个实施例所提供的一种图像处理方法。内存储器为非易失性存储介质中的操作系统计算机程序提供高速缓存的运行环境。网络接口可以是以太网卡或无线网卡等，用于与外部的电子设备进行通信。该电子设备可以是手机、平板电脑或者个人数字助理或穿戴式设备等。在一个实施例中，如图2所示，提供了一种图像处理方法，以该方法应用于图1中的电子设备为例进行说明，包括：步骤220，获取待处理图像。用户使用电子设备(具有拍照功能)进行拍照，获取待处理图像。待处理图像可以是拍照预览画面，也可以是拍照后保存到电子设备中的照片。步骤240，从待处理图像中确定待处理区域。待处理图像可以是包含人像、风景、静物等内容的图像。因此，在对待处理图像进行风格迁移处理之前，可以对待处理图像进行预处理，具体即为对待处理图像进行图像分割，分割出不同的内容所在的区域。图像分割(Segmentation)指的是将数字图像细分为多个图像子区域(像素的集合)(也被称作超像素)的过程，就是把图像分成若干个特定的、具有独特性质的区域并提出感兴趣目标的技术和过程。图像分割的目的是简化或改变图像的表示形式，使得图像更容易理解和分析。图像分割通常用于定位图像中的物体和边界(线，曲线等)。在对待处理图像进行图像分割之后，得到了包含不同内容的区域，从这些区域中确定待处理区域。例如，可以是包含了用户需要对之针对性的进行风格迁移处理的区域。其中待处理区域可以是待处理图像中的某一部分或某几部分。步骤260，根据风格迁移模型对待处理图像中的待处理区域进行风格迁移处理，得到风格迁移处理后的图像，其中，风格迁移模型部署在电子设备的相机中。图像风格迁移指的是将图像A的风格转换到图像B中去，得到新的图像，为所得到的新的图像命名为newB，其中newB中既包含图像B的内容，也包含图像A的风格。风格迁移模型为预先经过不同类型的风格图及大量的包括各种风景、人像、静物的训练图进行风格迁移训练所得到的模型。当采用风格图为素描风格图进行训练，则根据素描风格图经过训练得到的风格迁移模型为素描风格迁移模型；当采用风格图为动漫风格图进行训练，则根据动漫风格图经过训练得到的风格迁移模型为动漫风格迁移模型。且训练所得到的风格迁移模型部署在电子设备的相机中，即用户可以在打开电子设备的相机功能时，就可以对拍照预览画面中的待处理区域进行风格迁移，或者对相机拍摄所得的图像中的待处理区域进行风格迁移。待处理区域为通过图像分割技术所确定的需要进行风格迁移处理的区域。步骤280，输本文档来自技高网...

【技术保护点】
1.一种图像处理方法，其特征在于，包括：/n获取待处理图像；/n从所述待处理图像中确定待处理区域；/n根据风格迁移模型对所述待处理图像中的待处理区域进行风格迁移处理，得到风格迁移处理后的图像，其中，所述风格迁移模型部署在电子设备的相机中；/n输出所述风格迁移处理后的图像。/n

【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：
获取待处理图像；
从所述待处理图像中确定待处理区域；
根据风格迁移模型对所述待处理图像中的待处理区域进行风格迁移处理，得到风格迁移处理后的图像，其中，所述风格迁移模型部署在电子设备的相机中；
输出所述风格迁移处理后的图像。


2.根据权利要求1所述的方法，其特征在于，从所述待处理图像中确定待处理区域，包括：
对所述待处理图像进行人像分割得到人像区域；
将所述待处理图像中的人像区域确定为待处理区域。


3.根据权利要求1所述的方法，其特征在于，从所述待处理图像中确定待处理区域，包括：
对所述待处理图像进行人像分割得到人像区域；
根据所述人像区域得到所述待处理图像中的背景区域；
将所述待处理图像中的背景区域确定为待处理区域。


4.根据权利要求1所述的方法，其特征在于，所述风格迁移模型的生成方式，包括：
步骤A，获取风格图和训练图；
步骤B，将所述训练图输入图像转换网络得到生成图；
步骤C，将所述训练图、风格图及生成图输入损失计算网络对所述图像转换网络进行修正，所述损失计算网络为resnet-101网络；
循环执行上述步骤A、B、C直到所述图像转换网络收敛，得到风格迁移模型。


5.根据权利要求4所述的方法，其特征在于，所述风格图为素描风格图，则根据所述素描风格图经过训练得到的风格迁移模型为...

【专利技术属性】
技术研发人员：刘耀勇，陈岩，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：广东;44