虚拟试穿系统、虚拟试穿方法、虚拟试穿程序、信息处理装置、以及学习数据制造方法及图纸

虚拟试穿系统(1)具备学习部(12C)、取得部(12A)、导出部(12D)、生成部(26H)。学习部(12C)通过使用了试穿者的三维数据的机械学习来对学习模型进行学习，该学习模型以教导试穿者图像作为输入数据，以表示由教导试穿者图像呈现的试穿者的体型的体型参数以及教导试穿者图像中的衣物图像的合成位置信息作为输出数据。取得部(26G)取得试穿者图像。导出部(12D)使用试穿者图像和学习模型，导出由试穿者图像呈现的试穿者的输出数据。生成部(26H)使用导出的输出数据，生成对试穿者图像和衣物图像进行合成而得的虚拟试穿图像。

【技术实现步骤摘要】
【国外来华专利技术】虚拟试穿系统、虚拟试穿方法、虚拟试穿程序、信息处理装置、以及学习数据
本专利技术的实施方式涉及虚拟试穿系统、虚拟试穿方法、虚拟试穿程序、信息处理装置、以及学习数据。
技术介绍
公开有显示表示穿戴了作为试穿对象的衣物的状态的虚拟图像的技术。例如，公开有显示表示用户试穿衣物的状态的合成图像的技术。现有技术文献专利文献专利文献1：日本特开2014-165613号公报专利文献2：日本特开2016-122411号公报
技术实现思路
专利技术所要解决的课题然而，以往，在进行虚拟试穿图像的显示时，取得与试穿者的三维形状相关的信息，并根据所取得的与三维形状相关的信息来进行变形以及对位，由此来对衣物图像和试穿者图像进行合成。因此，以往，难以通过简单的结构提供高精度地合成了的虚拟试穿图像。本专利技术所要解决的课题在于提供一种能够容易地提供高精度地合成了的虚拟试穿图像的虚拟试穿系统、虚拟试穿方法、虚拟试穿程序、信息处理装置、以及学习数据。用于解决课题的手段实施方式的虚拟试穿系统具备学习部、取得部、导出部、生成部。学习部通过使用了试穿者的三维数据的机械学习来学习以教导试穿者图像作为输入数据、以表示由上述教导试穿者图像呈现的试穿者的体型的体型参数以及上述教导试穿者图像中的衣物图像的合成位置信息作为输出数据的学习模型。取得部取得试穿者图像。导出部使用上述试穿者图像和上述学习模型导出由上述试穿者图像呈现的试穿者的上述输出数据。生成部使用所导出的上述输出数据生成对上述试穿者图像和衣物图像进行合成而得的虚拟试穿图像。附图说明图1是虚拟试穿系统的示意图。图2是示出主体部与试穿者之间的位置关系的示意图。图3是信息处理装置以及终端装置的功能框图。图4是示出学习数据的数据结构的一例的示意图。图5是合成位置信息的一例的说明图。图6是示出虚拟试穿图像的一例的示意图。图7是示出信息处理的次序的一例的流程图。图8是示出信息处理的次序的一例的流程图。图9是示出信息处理装置、终端装置、以及外部服务器的硬件结构例的框图。具体实施方式以下，参照附图对虚拟试穿系统、虚拟试穿方法、虚拟试穿程序、信息处理装置、以及学习数据的一个实施方式详细地进行说明。图1是本实施方式的虚拟试穿系统1的示意图。虚拟试穿系统1具备信息处理装置10、终端装置26、外部服务器28。信息处理装置10、终端装置26、外部服务器28经由通信线路34连接。通信线路34是公知的网络。信息处理装置10、终端装置26、以及外部服务器28通过有线或者无线的方式与通信线路34连接。另外，在本实施方式中，以虚拟试穿系统1具备1台信息处理装置10、1台外部服务器28、1台终端装置26的情况作为一例进行说明。但是，虚拟试穿系统1只要为具备1台或者多台信息处理装置10、1台或者多台外部服务器28、1台或者多台终端装置26的结构即可。终端装置26是显示虚拟试穿图像的装置。虚拟试穿图像是指在试穿者的试穿者图像50上合成了衣物图像的合成图像。换言之，虚拟试穿图像是示出试穿者虚拟地试穿衣物的状态的图像。在本实施方式中，终端装置26使用在信息处理装置10中生成的学习模型来生成虚拟试穿图像并显示。学习模型的详细情况后述。终端装置26由进行虚拟试穿的试穿者操作。终端装置26例如是公知的个人计算机、便携式的移动终端、智能手机等。试穿者是试穿衣物的对象。试穿者只要是试穿衣物的对象即可，可以是生物、也可以是非生物。生物例如能够举出人物。另外，生物并不限于人物，也可以是狗或猫等人物以外的动物。并且，非生物能够举出模仿人体或动物的形状的模特或其他物体等，但并不限于此。并且，试穿者也可以是穿戴了衣物的状态的生物或非生物。在本实施方式中，对试穿者为人物的情况进行说明。另外，在本实施方式中，在将试穿者以及试穿者以外的人物作为总称而进行说明的情况下，仅称为用户而进行说明。衣物是指试穿者能够穿戴的物品。衣物例如能够举出上衣、裙子、裤子、鞋、帽子、饰品、泳衣、假发等。另外，衣物并不限定于上衣、裙子、裤子、鞋、帽子、饰品、泳衣、假发等。终端装置26具备拍摄部26A、输入部26B、显示部26C。拍摄部26A拍摄试穿者而获得试穿者的试穿者图像51。试穿者图像51是试穿者图像50的一例。试穿者图像51示出由终端装置26拍摄的试穿者图像50。拍摄部26A是公知的数字照相机。试穿者图像51(试穿者图像50)具体而言为试穿者图像数据。在本实施方式中，为了简化说明，仅称为试穿者图像51(试穿者图像50)而进行说明。另外，试穿者图像50的数据形式并无限定。例如，试穿者图像50是针对每个像素规定了表示试穿者的颜色或亮度等的像素值的图像。另外，试穿者图像50并不限定于位图图像。显示部26C显示各种图像。在本实施方式中，显示部26C显示虚拟试穿图像。显示部26C是公知的LCD(LiquidCrystalDisplay)或有机EL(Electro－Luminescence)等。输入部26B接受由用户作出的操作指示。输入部26B是键盘、鼠标、输入按钮等。另外，显示部26C和输入部26B也可以构成为一体。在该情况下，显示部26C以及输入部26B以触摸面板来构成即可。外部服务器28是能够处理衣物图像、大数据的服务器装置。在本实施方式中，外部服务器28将用于虚拟试穿图像的衣物图像和用于识别衣物图像的衣物ID预先建立对应并存储。在外部服务器28中，多个衣物图像与各自的衣物ID建立对应地预先存储。并且，外部服务器28通过对大数据进行处理而对在因特网上的各种服务器装置中蓄积的用户的购买信息等进行分析。信息处理装置10是用于生成学习模型的装置。学习模型是用于从试穿者图像导出由该试穿者图像呈现的试穿者的体型参数以及合成位置信息的应用程序。学习模型的详细情况后述。信息处理装置10能够从1个或者多个终端装置26访问，提供所学习到的学习模型或从学习模型导出的输出数据等。信息处理装置10具备信息处理部11和主体部16。信息处理部11具有控制部12和存储部14。控制部12对在信息处理装置10设置的装置各部进行控制。存储部14是存储各种数据的、公知的硬盘器件。主体部16具备显示部18、拍摄部20、三维数据取得部21、输入部22。输入部22接受由用户作出的各种操作指示。输入部22例如是键盘、触摸面板、指示装置、鼠标等。拍摄部20对试穿者进行拍摄而获得试穿者的试穿者图像50。另外，将由设置于信息处理装置10的拍摄部20拍摄到的试穿者图像50称为教导试穿者图像40而进行说明。教导试穿者图像40是用于在学习模型的生成中使用的试穿者图像50。拍摄部20是能够取得教导试穿者图像40的公知的拍摄装置。拍摄部20例如是数字照相机。另外，在图1中，作为一例，示出了1台拍摄部20。但是，信息处理装置1本文档来自技高网...

【技术保护点】
1.一种虚拟试穿系统，具备：/n学习部，通过使用了试穿者的三维数据的机械学习来对学习模型进行学习，上述学习模型以教导试穿者图像作为输入数据，以表示由上述教导试穿者图像呈现的试穿者的体型的体型参数以及上述教导试穿者图像中的衣物图像的合成位置信息作为输出数据；/n取得部，取得试穿者图像；/n导出部，使用上述试穿者图像和上述学习模型，导出由上述试穿者图像呈现的试穿者的上述输出数据；以及/n生成部，使用导出的上述输出数据，生成对上述试穿者图像和衣物图像进行合成而得的虚拟试穿图像。/n

【技术特征摘要】
【国外来华专利技术】20180221 JP 2018-0290411.一种虚拟试穿系统，具备：
学习部，通过使用了试穿者的三维数据的机械学习来对学习模型进行学习，上述学习模型以教导试穿者图像作为输入数据，以表示由上述教导试穿者图像呈现的试穿者的体型的体型参数以及上述教导试穿者图像中的衣物图像的合成位置信息作为输出数据；
取得部，取得试穿者图像；
导出部，使用上述试穿者图像和上述学习模型，导出由上述试穿者图像呈现的试穿者的上述输出数据；以及
生成部，使用导出的上述输出数据，生成对上述试穿者图像和衣物图像进行合成而得的虚拟试穿图像。


2.根据权利要求1所述的虚拟试穿系统，其中，
上述生成部生成在上述试穿者图像中的由导出的上述输出数据所包含的上述合成位置信息表示的合成位置合成了根据该输出数据所包含的上述体型参数变形后的衣物图像的上述虚拟试穿图像。


3.根据权利要求1所述的虚拟试穿系统，其中，
上述学习部对在上述输入数据以及上述输出数据的至少一方包含试穿者的特征信息的上述学习模型进行学习。


4.根据权利要求3所述的虚拟试穿系统，其中，
上述特征信息表示试穿者的外观特征以及内在特征的至少一方。


5.根据权利要求3所述的虚拟试穿系统，其中，
上述特征信息表示上述试穿者的肤色、从衣物露出的露出度、发型、国籍、惯用手、性格、以及推荐拍摄方向的至少1个。


6.根据权利要求1所述的虚拟试穿系统，其中，
上述学习部具有生成对上述教导试穿者图像进行扩展后的扩展图像的扩展图像生成部，
使用包含上述教导试穿者图像的上述输入数据以及包含上述扩展图像的上述输入数据来对上述学习模型进行学习。


7.根据权利要求6所述的虚拟试穿系统，其中，
上述扩展图像生成部作为上述扩展图像生成下述图像中的至少1个，即：在上述教导试穿者图像所包含的试穿者区域上重叠了衣物图像的衣物重叠图像、遮掩了上述教导试穿者图像的一部分区域的遮掩图像、将上述教导试穿者图像的一部分区域切出的切出图像、对上述教导试穿者图像的至少一部分区域进行加工后的加工图像。


8.根据权利要求1所述的虚拟试穿系统，其中，
上述输入数据包含拍摄时间、拍摄角度、在拍摄中使用的拍摄部的种类、拍摄时的试穿者的姿势中的至少1个不同的多个上述教导试穿者图像。


9.根据权利要求1所述的虚拟试穿系统，其中，
上述学习部通过使用了学习数据的机械学习来对上述学习模型进行学习，该学习数据包含对包含上述教导试穿者图像的上述输入数据和基于由上述教导试穿者图像呈现的试穿者的三维数据导出的与上述教导试穿者图像对应的上述输出数据建立了对应的多个教导数据。


10.根据权利要求9所述的虚拟试穿系统，其中，
上述输入数据包含上述试穿者的特征信息，
上述学习部包含修正部，该修正部根据上述输入数据所包含的上述特征信息，对上述学习数据中的从上述三维数据导出的上述输出数据进行修正。


11.根据权利要求9所述的虚拟试穿系统，其中，
上述学习部具有：
显示控制部，在显示部显示如下的重叠图像...

【专利技术属性】
技术研发人员：上田弘树，吉冈寿朗，
申请(专利权)人：株式会社东芝，东芝数字解决方案株式会社，
类型：发明
国别省市：日本;JP