一种图像生成方法及装置制造方法及图纸

本发明专利技术实施例提供了一种图像生成方法及装置，涉及图像处理技术领域。该方法包括：获取包括目标对象的第一图像；对所述第一图像进行光照估计，获取所述第一图像的光照信息；根据所述光照信息对目标服装模型进行渲染，生成第二图像；融合所述第一图像和所述第二图像，以获取所述目标对象穿戴所述目标服装模型对应的虚拟服装之后的效果图像。本发明专利技术实施例用于解决真实光源信息与手动配置的光源信息不匹配，影响效果图像的真实感的问题。影响效果图像的真实感的问题。影响效果图像的真实感的问题。

【技术实现步骤摘要】
一种图像生成方法及装置


[0001]本专利技术涉及图像处理
，尤其涉及一种图像生成方法及装置。

技术介绍

[0002]虚拟试衣是指通过虚拟的技术手段输出试衣对象试穿新衣以后的效果图像。由于虚拟试衣技术可以在避免用户脱/穿衣服的情况下查看换上新衣后的效果，极大的提升了试衣效率，因此虚拟试衣具有非常广泛的使用前景。
[0003]目前，虚拟试衣普遍采用的方案为：对试衣对象进行图像采集，获取试衣对象的图像，然后对试衣对象的图像和虚拟服装的图像进行融合，以获取试衣对象穿上虚拟服装后的效果图像。然而，由于包括试衣对象的图像的光源信息为真实环境中的光源信息，而虚拟服装的图像的光源信息为开发人员手动配置的光源信息，因此常常会因为真实光源信息与手动配置的光源信息不匹配而导致效果图像中光源位置混乱、光照不均匀等问题，严重影响试衣效果图像的真实感。

技术实现思路

[0004]有鉴于此，本专利技术实施例提供了一种图像生成方法及装置，用于解决真实光源信息与手动配置的光源信息不匹配，影响效果图像的真实感的问题。
[0005]为了实现上述目的，本专利技术实施例提供技术方案如下：
[0006]第一方面，本专利技术的实施例提供了一种图像生成方法，包括：
[0007]获取包括目标对象的第一图像；
[0008]对所述第一图像进行光照估计，获取所述第一图像的光照信息；
[0009]根据所述光照信息对目标服装模型进行渲染，生成第二图像；
[0010]融合所述第一图像和所述第二图像，以获取所述目标对象穿戴所述目标服装模型对应的虚拟服装之后的效果图像。
[0011]作为本专利技术实施例一种可选的实施方式，所述方法还包括：
[0012]根据所述第一图像构建所述目标对象对应的第一模型；
[0013]根据所述第一模型确定所述目标对象对应的目标服装模型的服装状态；
[0014]所述根据所述光照信息对目标服装模型进行渲染，生成第二图像，包括：根据所述目标对象对应的所述目标服装模型的服装状态和所述光照信息对所述目标服装模型进行渲染，生成第二图像。
[0015]作为本专利技术实施例一种可选的实施方式，所述根据所述第一图像构建所述目标对象对应的第一模型，包括：
[0016]对所述目标对象进行关键点检测，获取所述目标对象的多个关键点的位置信息；
[0017]根据所述多个关键点的位置信息获取所述目标对象的体型和/或姿态；
[0018]根据所述目标对象的体型和/或姿态构建所述第一模型。
[0019]作为本专利技术实施例一种可选的实施方式，所述方法还包括：
[0020]接收对所述第一模型的体型和/或姿态的修正操作；
[0021]响应于对所述第一模型的体型和/或姿态的修正操作，对所述第一模型的体型和/或姿态进行修正。
[0022]作为本专利技术实施例一种可选的实施方式，所述根据所述第一模型确定所述目标对象对应的所述目标服装模型的服装状态，包括：
[0023]根据所述目标服装模型的初始状态构建所述目标对象对应的第二模型；
[0024]根据所述第一模型和所述第二模型确定所述目标对象对应的所述目标服装模型的服装状态。
[0025]作为本专利技术实施例一种可选的实施方式，所述根据所述第一模型和所述第二模型确定所述目标对象对应的所述目标服装模型的服装状态，包括：
[0026]根据所述第一模型和所述第二模型生成模型序列，所述模型序列包括多个模型，且所述多个模型依次由所述第二模型渐变为所述第一模型；
[0027]基于所述模型序列中的第一个模型对所述初始状态的所述目标服装模型进行模拟仿真，获取所述第一个模型对应的服装状态；
[0028]基于所述模型序列中的第n个模型对第n
‑
1个模型对应的服装状态的所述目标服装模型进行模拟仿真，获取所述第n个模型对应的服装状态，n为大于1的整数；
[0029]将所述模型序列中的最后一个模型对应的服装状态确定为所述目标对象对应的所述目标服装模型的服装状态。
[0030]作为本专利技术实施例一种可选的实施方式，所述根据所述光照信息对目标服装模型进行渲染，生成第二图像，包括：
[0031]根据所述光照信息生成所述第一图像对应的光照贴图；
[0032]根据所述光照贴图对目标服装模型进行渲染，生成第二图像。
[0033]作为本专利技术实施例一种可选的实施方式，所述根据所述目标对象对应的所述目标服装模型的服装状态和所述光照信息对所述目标服装模型进行渲染，生成第二图像，包括：
[0034]获取虚拟服装的材质信息；
[0035]根据所述目标对象对应的所述目标服装模型的服装状态、所述光照信息以及所述虚拟服装的材质信息对所述目标服装模型进行渲染，生成所述第二图像。
[0036]作为本专利技术实施例一种可选的实施方式，在根据所述光照信息对所述目标服装模型进行渲染之前，所述方法还包括：
[0037]显示服装选取界面，所述服装选取界面显示有至少一个服装模型的标识；
[0038]接收在所述服装选取界面输入的选择操作；
[0039]将接收到所述选择操作的标识对应的服装模型确定为所述目标服装模型。
[0040]作为本专利技术实施例一种可选的实施方式，所述方法还包括：
[0041]接收对所述效果图像的修正操作；
[0042]响应于对所述效果图像的修正操作，对所述效果图像进行修正。
[0043]第二方面，本专利技术实施例提供了一种图像生成装置，包括：
[0044]获取单元，用于获取包括目标对象的第一图像；
[0045]处理单元，用于对所述第一图像进行光照估计，获取所述第一图像的光照信息；
[0046]渲染单元，用于根据所述光照信息对目标服装模型进行渲染，生成第二图像；
[0047]融合单元，用于融合所述第一图像和所述第二图像，以获取所述目标对象穿戴所述目标服装模型对应的虚拟服装之后的效果图像。
[0048]作为本专利技术实施例一种可选的实施方式，
[0049]所述处理单元，还用于根据所述第一图像构建所述目标对象对应的第一模型；所述根据所述第一模型确定所述目标对象对应的所述目标服装模型的服装状态；
[0050]所述渲染单元，具体用于根据所述目标对象对应的所述目标服装模型的服装状态和所述光照信息对所述目标服装模型进行渲染，生成第二图像。
[0051]作为本专利技术实施例一种可选的实施方式，
[0052]所述处理单元，具体用于对所述目标对象进行关键点检测，获取所述目标对象的多个关键点的位置信息；根据所述多个关键点的位置信息获取所述目标对象的体型和/或姿态；根据所述目标对象的体型和/或姿态构建所述第一模型。
[0053]作为本专利技术实施例一种可选的实施方式，所述图像生成装置还包括：
[0054]模型修正单元，用于接收对所述第一模型的体型和/或姿态的修正操作；响应于对所述本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像生成方法，其特征在于，包括：获取包括目标对象的第一图像；对所述第一图像进行光照估计，获取所述第一图像的光照信息；根据所述光照信息对目标服装模型进行渲染，生成第二图像；融合所述第一图像和所述第二图像，以获取所述目标对象穿戴所述目标服装模型对应的虚拟服装之后的效果图像。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：根据所述第一图像构建所述目标对象对应的第一模型；根据所述第一模型确定所述目标对象对应的所述目标服装模型的服装状态；所述根据所述光照信息对目标服装模型进行渲染，生成第二图像，包括：根据所述目标对象对应的所述目标服装模型的服装状态和所述光照信息对所述目标服装模型进行渲染，生成第二图像。3.根据权利要求2所述的方法，其特征在于，所述根据所述第一图像构建所述目标对象对应的第一模型，包括：对所述目标对象进行关键点检测，获取所述目标对象的多个关键点的位置信息；根据所述多个关键点的位置信息获取所述目标对象的体型和/或姿态；根据所述目标对象的体型和/或姿态构建所述第一模型。4.根据权利要求3所述的方法，其特征在于，所述方法还包括：接收对所述第一模型的体型和/或姿态的修正操作；响应于对所述第一模型的体型和/或姿态的修正操作，对所述第一模型的体型和/或姿态进行修正。5.根据权利要求3所述的方法，其特征在于，所述根据所述第一模型确定所述目标对象对应的所述目标服装模型的服装状态，包括：根据所述目标服装模型的初始状态构建所述目标对象对应的第二模型；根据所述第一模型和所述第二模型确定所述目标对象对应的所述目标服装模型的服装状态。6.根据权利要求5所述的方法，其特征在于，所述根据所述第一模型和所述第二模型确定所述目标对象对应的所述目标服装模型的服装状态，包括：根据所述第一模型和所述第二模型生成模型序列，所述模型序列包括多个模型，且所述多个模型依次由所述第二模型渐变为所述第一模型；基于所述模型序列中的第一个模型对所述初始状态的所述目标服装模型进行模拟仿真，获取所述第一个模型对应的服装状态；基于所述模型序列中的第n个模型对第n
‑
1个模型对应的服装状态的所述目标服装模型进行模拟仿真，获取所述第n个模型对应的服装状态，n为大于1的整数；将所述模型序列中的最后一个模型对应的服装状态确定为所述目标对象对应的所述目标服装模型的...

【专利技术属性】
技术研发人员：张树鹏，江一帆，
申请(专利权)人：北京字跳网络技术有限公司，
类型：发明
国别省市：