图像处理方法及装置、计算机可读介质及终端设备制造方法及图纸

本公开涉及多媒体数据处理技术领域，具体涉及一种图像处理方法、一种图像处理装置、一种计算机可读介质以及一种终端设备。所述方法包括：获取原始图像，以及自定义风格迁移配置参数；其中，自定义风格迁移配置参数包括原始图像的待处理区域，以及所述待处理区域对应的参考图像；根据原始图像的特征矩阵和所述参考图像的特征矩阵计算对应的特征转换矩阵；基于所述原始图像特征矩阵的第一均值处理参数、所述特征转换矩阵以及所述参考图像特征矩阵的第二均值处理参数获取风格迁移图像；对所述风格迁移图像与所述原始图像进行图像融合处理，以获取符合所述自定义风格迁移配置数据的目标图像。本方法能自定义参考图像对原始图像进行自定义的风格变换。

【技术实现步骤摘要】
图像处理方法及装置、计算机可读介质及终端设备
本公开涉及多媒体数据处理
，具体涉及一种图像处理方法、一种图像处理装置、一种计算机可读介质以及一种终端设备。
技术介绍
随着图像处理技术的不断发展，在智能终端设备上，用户可以利用应用程序对图像或视频进行多种风格、色彩或者内容的变换。例如，同时为图片施加滤镜的方式。现有技术在对图像进行滤镜处理时，一般采用像素映射的模式，通过预设映射表改变像素来实现对图像施加不同的滤镜效果。并且，大多数算法对图像施加一种滤镜效果，无法区分前景和背景。用户也无法对图像中指定的内容进行图像风格的变换。并且，由于现有算法比较复杂，对图像的处理速度较慢，耗时较长。需要说明的是，在上述
技术介绍
部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
技术实现思路
本公开提供一种图像处理方法、一种图像处理装置、一种计算机可读介质以及一种终端设备，能够根据参考图像对原始图像进行自定义的风格变换。本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。根据本公开的第一方面，提供一种图像处理方法，包括：获取原始图像，以及自定义风格迁移配置参数；其中，所述自定义风格迁移配置参数包括所述原始图像的待处理区域，以及所述待处理区域对应的参考图像；根据所述原始图像的特征矩阵和所述参考图像的特征矩阵计算对应的特征转换矩阵；基于所述原始图像特征矩阵的第一均值处理参数、所述特征转换矩阵以及所述参考图像特征矩阵的第二均值处理参数获取风格迁移图像；对所述风格迁移图像与所述原始图像进行图像融合处理，以获取符合所述自定义风格迁移配置数据的目标图像。根据本公开的第二方面，提供一种图像处理装置，包括：图形获取模块，用于获取原始图像，以及自定义风格迁移配置参数；其中，所述自定义风格迁移配置参数包括所述原始图像的待处理区域，以及所述待处理区域对应的参考图像；特征转换矩阵计算模块，用于根据所述原始图像的特征矩阵和所述参考图像的特征矩阵计算对应的特征转换矩阵；风格迁移图像获取模块，用于基于所述原始图像特征矩阵的第一均值处理参数、所述特征转换矩阵以及所述参考图像特征矩阵的第二均值处理参数获取风格迁移图像；图像融合处理模块，用于对所述风格迁移图像与所述原始图像进行图像融合处理，以获取符合所述自定义风格迁移配置数据的目标图像。根据本公开的第三方面，提供一种计算机可读介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述的图像处理方法。根据本公开的第四方面，提供一种终端设备，包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现上述的图像处理方法。本公开的一种实施例所提供的图像处理方法，通过预先为原始图像自定义参考图像，从而可以根据原始图像和参考图像构建特征转换矩阵，再利用原始图像、参考图像和特征转换矩阵来进行计算获取风格迁移图像，再将风格迁移图像和原始图像进行融合来获取满足自定义风格迁移配置的目标图像，从而实现将原始图像中的待处理区域转换为参考图像的风格。能够对原始图像中的不同区域图像同时转换为不同的风格。应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。附图说明此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1示意性示出本公开示例性实施例中一种图像处理方法的流程示意图；图2示意性示出本公开示例性实施例中一种原始图像的示意图；图3示意性示出本公开示例性实施例中一种原始图像对应的主体模板的示意图；图4示意性示出本公开示例性实施例中一种原始图像对应的背景模板的示意图；图5示意性示出本公开示例性实施例中一种参考图像的示意图；图6示意性示出本公开示例性实施例中一种原始图像对应的风格迁移图像的示意图；图7示意性示出本公开示例性实施例中一种融合后图像的示意图；图8示意性示出本公开示例性实施例中一种风格迁移模型的训练方法的示意图；图9示意性示出本公开示例性实施例中一种图像处理装置的组成示意图；图10示意性示出本公开示例性实施例中一种终端设备的电子设备结构示意图。具体实施方式现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。此外，附图仅为本公开的示意性图解，并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体，不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。现有智能终端设备中，例如手机和平板电脑，为了提升用户拍照体验，增加图像的多样化，一般可以对图像添加滤镜效果。一般来说，可以通过对图像的目标区域和背景区域施加不同的色彩处理方式，使得目标区域的亮度或色度高于背景区域的亮度和色度，使得目标区域对应的主题更加显著地突出显示，实现终端用户拍照或拍摄视频时具有电影特效。但是，大多数的方案并不能支持用户对滤镜效果的自定义处理。并且，一张图像在处理时也仅能使用一种滤镜效果。针对上述的现有技术的缺点和不足，本示例实施方式中提供了一种图像处理方法。参考图1中所示，上述的图像处理方法可以包括以下步骤：S11，获取原始图像，以及自定义风格迁移配置参数；其中，所述自定义风格迁移配置参数包括所述原始图像的待处理区域，以及所述待处理区域对应的参考图像；S12，根据所述原始图像的特征矩阵和所述参考图像的特征矩阵计算对应的特征转换矩阵；S13，基于所述原始图像特征矩阵的第一均值处理参数、所述特征转换矩阵以及所述参考图像特征矩阵的第二均值处理参数获取风格迁移图像；S14，对所述风格迁移图像与所述原始图像进行图像融合处理，以获取符合所述自定义风格迁移配置数据的目标图像。本示例实施方式所提供的图像处理方法中，一方面，用户可以通过预先配置参考图像来自定义待转换的风格，并且可以配置参考图像对应的原始图像中的待处理区域；另一方面，通过利用原始图像、参考图像和特征转换矩阵来进行计算获取风格迁移图像，再将风格迁移图像和原始本文档来自技高网...

【技术保护点】
1.一种图像处理方法，其特征在于，包括：/n获取原始图像，以及自定义风格迁移配置参数；其中，所述自定义风格迁移配置参数包括所述原始图像的待处理区域，以及所述待处理区域对应的参考图像；/n根据所述原始图像的特征矩阵和所述参考图像的特征矩阵计算对应的特征转换矩阵；/n基于所述原始图像特征矩阵的第一均值处理参数、所述特征转换矩阵以及所述参考图像特征矩阵的第二均值处理参数获取风格迁移图像；/n对所述风格迁移图像与所述原始图像进行图像融合处理，以获取符合所述自定义风格迁移配置数据的目标图像。/n

【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：
获取原始图像，以及自定义风格迁移配置参数；其中，所述自定义风格迁移配置参数包括所述原始图像的待处理区域，以及所述待处理区域对应的参考图像；
根据所述原始图像的特征矩阵和所述参考图像的特征矩阵计算对应的特征转换矩阵；
基于所述原始图像特征矩阵的第一均值处理参数、所述特征转换矩阵以及所述参考图像特征矩阵的第二均值处理参数获取风格迁移图像；
对所述风格迁移图像与所述原始图像进行图像融合处理，以获取符合所述自定义风格迁移配置数据的目标图像。


2.根据权利要求1所述的图像处理方法，其特征在于，所述根据所述原始图像、所述参考图像的对应的特征矩阵计算对应的特征转换矩阵，包括：
对所述原始图像进行编码并获取对应的第一特征矩阵，对所述第一特征矩阵进行卷积处理以获取第一卷积结果，对所述第一卷积结果计算通道维度的第一协方差矩阵，对所述第一协方差矩阵进行全连接处理，以获取第一预处理矩阵；以及
对所述参考图像进行编码并获取对应的第二特征矩阵，对所述第二特征矩阵进行卷积处理以获取第二卷积结果，对所述第二卷积结果计算通道维度的第二协方差矩阵，对所述第二协方差矩阵进行全连接处理，以获取第二预处理矩阵；
对所述第一预处理矩阵和第二预处理矩阵相乘，以获取所述特征转换矩阵。


3.根据权利要求1所述的图像处理方法，其特征在于，所述基于所述原始图像特征矩阵的第一均值处理参数、所述特征转换矩阵以及所述参考图像特征矩阵的第二均值处理参数获取风格迁移图像，包括：
将所述特征转换矩阵与对所述原始图像特征矩阵去均值处理后的第一均值处理参数的乘积，与所述参考图像特征矩阵取均值操作后的第二均值处理参数进行求和，以获取所述风格迁移图像。


4.根据权利要求1所述的图像处理方法，其特征在于，所述获取原始图像后，所述方法还包括：
对所述原始图像进行分割处理，以获取对应的前景区域图像和背景区域图像；
在将所述前景区域图像配置为所述待处理区域时，则利用所述前景区域图像的特征矩阵和所述参考图像的特征矩阵计算对应的特征转换矩阵；以及基于所述前景区域图像特征矩阵的均值处理参数、所述特征转换矩阵以及所述参考图像特征矩阵的均值处理参数获取风格迁移图像。


5.根据权利要求1所述的图像处理方法，其特征在于，所述方法还包括：
接收用户输入的所述原始图像，以及一个或多个所述参考图像；
对所述原始图像进行分割处理，并展示分割处理后的主体模板和背景模板；
响应于用户的选择操作，为所述主体模板配置对应的第一参考图像和/或为所述背...

【专利技术属性】
技术研发人员：张弓，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：广东;44