头像显示装置、头像生成装置以及程序制造方法及图纸

头像显示装置(20)具备：获取部(210)，其获取人物的拍摄数据；第2获取部(211)，其从拍摄数据获取人物的深度数据或图像数据；生成部(212)，其根据深度数据或图像数据合成3D模型，生成头像；以及显示部(213)，其在信息通讯装置(30)的图像显示区域(31)显示跟随人物动作的头像。头像。头像。

【技术实现步骤摘要】
【国外来华专利技术】头像显示装置、头像生成装置以及程序


[0001]本专利技术涉及一种头像(avatar)显示装置、头像生成装置以及程序。

技术介绍

[0002]一直以来，已知有使用计算机绘图来展现人物的技术。例如，专利文献1中公开有一种使用脸部网格制作脸部动画的技术。由此可以制作出人物脸部图像的真实脸部动画。
[0003]现有技术文献
[0004]专利文献
[0005]专利文献1：日本特表2009
‑
523288号公报

技术实现思路

[0006]专利技术所要解决的课题
[0007]然而，上述现有技术虽然能够真实地再现脸部表情，但生成的只是动画，并非生成头像的技术。近年来，作为图像中自己分身的头像备受瞩目，人们希望有一种技术能生成头像，有效地展现自身形象。
[0008]用于解决课题的技术方案
[0009]为了解决上述课题，本专利技术一实施方式所涉及的头像显示装置具备：获取部，其获取人物的拍摄数据；第2获取部，其从所述拍摄数据获取所述人物的深度数据或图像数据；生成部，其根据所述深度数据或图像数据合成3D模型，生成头像；以及显示部，其在信息通讯装置的图像显示区域显示跟随所述人物动作的所述头像。
[0010]为了解决上述课题，本专利技术一实施方式所涉及的头像生成装置具备：获取部，其获取人物的拍摄数据；第2获取部，其从所述拍摄数据获取所述人物的深度数据或图像数据；生成部，其根据所述深度数据或图像数据合成3D模型，生成头像；以及输出部，其输出所生成的所述头像。
[0011]本专利技术各实施方式所涉及的头像显示装置及头像生成装置可以通过计算机来实现，这种情况下，使计算机作为所述头像显示装置所具备的各部(软件要素)执行操作从而使计算机实现所述头像显示装置的头像显示装置的控制程序、以及记录该控制程序的计算机可读取记录介质也在本专利技术的范畴内。
附图说明
[0012]图1是本专利技术实施方式1所涉及的头像显示系统的框图。
[0013]图2是表示实施方式1所涉及的头像显示方法流程的流程图。
[0014]图3是表示生成并显示上半身头像的步骤的一例的概念图。
[0015]图4是从脸部点群数据中提取仅对应于眼、鼻、口的数据的图。
[0016]图5是表示在生成头像时连接人物脸部模型和上半身模型的处理的概念图。
[0017]图6是表示使用纹理数据生成头像的处理的概念图。
[0018]图7是实施方式1的改进例1所涉及的便携式终端的框图。
[0019]图8是实施方式1的改进例2所涉及的头像显示系统的框图。
[0020]图9是表示本专利技术实施方式2所涉及的便携式终端构成的框图。
[0021]图10是表示实施方式2所涉及的头像显示方法流程的流程图。
[0022]图11是表示本专利技术实施方式3所涉及的头像显示系统构成的框图。
[0023]图12是表示实施方式3所涉及的头像显示方法流程的流程图。
[0024]图13是表示跟随头像的表情的一例。
[0025]图14是表示对动态图像中背景和人物两者进行置换的步骤的概念图。
[0026]图15是表示从拍摄数据中提取人物轮廓的结果的一例的概念图。
[0027]图16是表示从图像数据中提取人物脸部特征点的结果的一例的概念图。
[0028]图17是表示从图像数据中提取人物脸部对应于眼、鼻、口的特征点的结果示例的概念图。
[0029]图18是表示脸部正面部3D模型和除脸部正面部以外的头部3D模型的一例的概念图。
[0030]图19是使用计算机构成头像显示装置等各部时的一构成例。
具体实施方式
[0031]〔实施方式1〕
[0032](头像显示系统)
[0033]以下针对本专利技术一实施方式进行详细说明。图1是表示实施方式1所涉及的头像显示系统100构成的框图。头像显示系统100具备拍摄装置10、头像显示装置20以及信息通讯装置30。信息通讯装置30是用户使用的信息通讯装置，经由网络，与其他用户所使用的信息通讯装置30a、30b、30c
…
相连接。信息通讯装置之间可以通过P2P方式连接，也可以经由未图示的服务器实现连接。
[0034]在本实施方式中，头像显示系统是指在信息通讯装置的图像显示区域中显示头像的系统，头像显示装置是指在信息通讯装置的图像显示区域中显示头像的装置。显示头像的信息通讯装置可以是用户使用的信息通讯装置30，可以是其他用户所使用的信息通讯装置30a、30b、30c
…
，也可以是这两者。
[0035]拍摄装置10是用于拍摄人物(用户)以生成头像的装置。拍摄装置10可以获取静态图像或动态图像，具备将所获取的拍摄数据发送给头像显示装置20的通讯部11。
[0036]在一实施方式中，拍摄装置10可以是一种深度相机，不仅能拍摄图像(例如RGB图像)，还能测量与对象之间的距离(深度)。测量距离的方法可以采用周知的技术，例如可以采用三维Lidar(Light Detection and Ranging，光检测与距离修正)或者使用例如红外光的三角测量方式或TOF(Time Of Flight，飞行时间)方式等。此外，在一实施方式中，拍摄装置10可以是具备2个以上拍摄部的立体相机。拍摄装置10所获取的拍摄数据中可以包括表示深度的信息，对于包括表示深度信息的拍摄数据，有时会简称为“拍摄数据”。
[0037]作为一例，通讯部11是Bluetooth(注册商标)或Wi
‑
Fi(注册商标)等无线通讯接口，可以连接到网络。作为另一例，通讯部11可以是有线连接接口。拍摄装置10也可以是具备通讯功能的摄像机。或者，拍摄装置10也可以是具备通讯功能和拍摄装置的个人计算机
或便携式通讯终端等。便携式通讯终端是指手机、平板电脑等。
[0038]头像显示装置20可以具备主控制部21、通讯部22以及存储器23。主控制部21可以具备获取部210、第2获取部211、生成部212、显示部213以及纹理生成部214。
[0039]第2获取部211可以从拍摄数据获取(计算)深度数据。另外，如后所述，第2获取部211也可以从拍摄数据获取图像数据。生成部212可以根据深度数据合成3D模型，生成头像。在一实施方式中，生成部212可以将纹理生成部214生成的人物纹理数据合成为3D模型，生成头像。头像的详细生成方法将在后文阐述。
[0040]显示部213可以使用生成部212所生成的头像，生成用于显示跟随人物动作的头像的头像显示数据，并经由通讯部22发送给信息通讯装置30。信息通讯装置30可以根据需要将头像显示数据发送给信息通讯装置30a、30b、30c
…
。由此，显示部213可以在信息通讯装置30、30a、30b、30c
…
的全部或部分图像显示区域31显示跟随人物动作的头像。另外，显示部213也可以仅将头像显示数据与本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种头像显示装置，其具备：获取部，获取人物的拍摄数据；第2获取部，从所述拍摄数据获取所述人物的深度数据或图像数据；生成部，根据所述深度数据或图像数据合成3D模型，生成头像；以及显示部，在信息通讯装置的图像显示区域显示跟随所述人物动作的所述头像。2.根据权利要求1所述的头像显示装置，其还具备纹理生成部，根据所述拍摄数据生成所述人物的纹理数据；所述生成部将所述纹理数据合成到所述3D模型。3.根据权利要求1或2所述的头像显示装置，其中，所述图像显示区域是显示通讯系统参与者的参与者图像显示区域，所述显示部在所述参与者图像显示区域显示跟随所述人物动作的所述头像。4.根据权利要求1或2所述的头像显示装置，其中，所述图像显示区域是显示经由动态图像的通讯系统参与者的参与者图像显示区域，所述显示部将显示于所述参与者图像显示区域的所述人物置换为跟随所述人物动作的所述头像。5.根据权利要求1至4中任一项所述的头像显示装置，其还具备转换部，对所述生成部生成的头像的数据格式进行转换；所述转换部转换所述头像的数据格式，以符合所述信息通讯装置所使用的应用程序的图像数据格式。6.根据权利要求1至5中任一项所述的头像显示装置，其中，在所述深度数据或图像...

【专利技术属性】
技术研发人员：安仓胜秀，坂口卓也，冈伸幸，福泉武史，
申请(专利权)人：软银股份有限公司，
类型：发明
国别省市：