信息处理装置、3D数据生成方法及程序制造方法及图纸

当移动终端(30a)(信息处理装置)的操作检测单元(31)(检测单元)检测到在观察3D模型(90M)(3D对象)期间提供的操作指令时，纹理信息选择单元(33)(确定单元)根据由操作检测单元(31)检测到的操作指令来选择使用由3D模型获取单元(32)获取的哪个纹理信息(Ta，Tb)以绘制3D模型(90M)，所述纹理信息以多种不同格式表示3D模型(90M)的纹理。然后，渲染处理单元(34)(绘制单元)通过将由纹理信息选择单元(33)选择的纹理信息(Ta或Tb)渲染在基于网格信息(M)(形状信息)重构的3D模型(90M)上来绘制3D模型(90M)。制3D模型(90M)。制3D模型(90M)。

【技术实现步骤摘要】
【国外来华专利技术】信息处理装置、3D数据生成方法及程序


[0001]本公开内容涉及信息处理装置、3D数据生成方法及程序，并且更特别地，涉及能够改变进行渲染所需的数据大小的信息处理装置、3D数据生成方法及程序。

技术介绍

[0002]传统上，已经提出了下述方法(例如，专利文献1)：使用通过感测真实3D空间获得的信息——例如通过从不同视点捕获主体的图像获得的多视点视频——在观看空间中生成3D对象，以生成好像对象存在于观看空间中的视频(也被称为体积视频)。
[0003]引文列表
[0004]专利文献
[0005]专利文献1：WO 2017/082076 A

技术实现思路

[0006]技术问题
[0007]然而，专利文献1没有提及渲染时的数据大小。
[0008]本公开内容提出了一种能够改变渲染所需的数据大小的信息处理装置、3D数据生成方法及程序。
[0009]问题的解决方案
[0010]为了解决上面描述的问题，根据本公开内容的实施方式的信息处理装置包括：决定单元，该决定单元决定在绘制3D对象时使用以第一格式表示该3D对象的表面的第一纹理信息还是不同于所述第一纹理信息的以第二格式表示该3D对象的表面的第二纹理信息来绘制所述3D对象中的所有或一些；以及绘制单元，该绘制单元使用指示该3D对象的表面形状的形状信息和由决定单元决定的纹理信息来绘制该3D对象。
[0011]此外，根据本公开内容的实施方式的信息处理装置包括：存储单元，该存储单元存储指示3D对象的表面形状的形状信息、以第一格式表示该3D对象的表面的第一纹理信息以及使用不同于所述第一纹理信息的以第二格式表示该3D对象的表面的第二纹理信息表示的纹理信息；决定单元，当观察从绘制该3D对象的绘制装置输出的3D对象时，该决定单元决定将由存储单元存储的以多个不同格式的哪个纹理信息传输至该绘制装置；以及传输单元，该传输单元将所述形状信息和由决定单元决定的纹理信息传输至该绘制装置。
附图说明
[0012]图1是示出第一实施方式的信息处理系统的系统配置的示例的框图。
[0013]图2是示出其中服务器装置生成主体的3D模型的流程的概述的图。
[0014]图3是说明表示3D模型所需的数据内容的图。
[0015]图4是示出第一实施方式的移动终端的硬件配置的示例的硬件框图。
[0016]图5是示出第一实施方式的服务器装置的硬件配置的示例的硬件框图。
[0017]图6是示出第一实施方式的信息处理系统的功能配置的示例的功能框图。
[0018]图7是示出在第一实施方式中从服务器装置传输至移动终端的数据的示例的图。
[0019]图8是说明在第一实施方式的移动终端执行渲染时使用的纹理信息的图。
[0020]图9是示出由第一实施方式的移动终端执行的处理的流程的示例的流程图。
[0021]图10是说明第一实施方式的变型示例的移动终端执行渲染时使用的纹理信息的图。
[0022]图11是示出由第一实施方式的变型示例的移动终端执行的处理的流程的示例的流程图。
[0023]图12是示出第二实施方式的信息处理系统的系统配置的示例的框图。
[0024]图13是示出第二实施方式的信息处理系统的功能配置的示例的功能框图。
[0025]图14是示出由第二实施方式的信息处理系统执行的处理的示例的图。
[0026]图15是示出由第二实施方式的信息处理系统执行的处理的流程的示例的流程图。
[0027]图16是示出由第二实施方式的信息处理系统的变型示例(1)执行的处理的示例的图。
[0028]图17是示出由第二实施方式的信息处理系统的变型示例(2)执行的处理的示例的图。
[0029]图18是说明包含在第三实施方式的信息处理系统中的3D模型的数据结构的示例的图。
[0030]图19是示出第四实施方式的信息处理系统的功能配置的示例的功能框图。
[0031]图20是示出其中第四实施方式的信息处理系统执行3D对象的渲染的处理的流程的示例的图。
[0032]图21是示出其中使用不同的纹理信息绘制一个3D对象的示例的图。
[0033]图22是示出由第四实施方式的信息处理系统执行的处理的流程的示例的流程图。
[0034]图23是示出由第四实施方式的移动终端执行的纹理选择处理的流程的示例的流程图。
[0035]图24是示出由第四实施方式的移动终端执行的渲染处理的流程的示例的流程图。
[0036]图25是说明第五实施方式的信息处理系统的操作的图。
[0037]图26是示出由第五实施方式的信息处理系统执行的处理的流程的示例的流程图。
具体实施方式
[0038]下面将基于附图详细描述本公开内容的实施方式。注意，在下面描述的每个实施方式中，相同的部分由相同的附图标记表示，并且将省略重复的描述。
[0039]此外，将根据下面描述的项顺序来描述本公开内容。
[0040]1.第一实施方式
[0041]1‑
1.先决条件
‑
生成3D模型的描述
[0042]1‑
2.先决条件
‑
3D模型的数据结构的描述
[0043]1‑
3.移动终端的硬件配置的描述
[0044]1‑
4.服务器装置的硬件配置的描述
[0045]1‑
5.服务器装置和移动终端的功能配置的描述
[0046]1‑
6.从服务器装置传输至移动终端的数据的描述
[0047]1‑
7.由移动终端在执行渲染时使用的纹理信息的描述
[0048]1‑
8.由移动终端执行的处理的流程的描述
[0049]1‑
9.第一实施方式的效果
[0050]1‑
10.第一实施方式的变型示例的描述
[0051]1‑
11.由第一实施方式的变型示例中的移动终端执行的处理的流程的描述
[0052]1‑
12.第一实施方式的变型示例的效果
[0053]2.第二实施方式
[0054]2‑
1.服务器装置和移动终端的功能配置的描述
[0055]2‑
2.信息处理系统的操作的描述
[0056]2‑
3.由信息处理系统执行的处理的流程的描述
[0057]2‑
4.第二实施方式的效果
[0058]2‑
5.第二实施方式的变型示例(1)的描述
[0059]2‑
6.第二实施方式的变型示例(2)的描述
[0060]3.第三实施方式
[0061]4.第四实施方式
[0062]4‑
1.信息处理系统的功能配置的描述
[0063]4‑
2.由信息处理系统执行的处理的描述
[0064]4‑
3.由信息处本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种信息处理装置，包括：决定单元，所述决定单元决定在绘制3D对象时使用以第一格式表示所述3D对象的表面的第一纹理信息还是不同于所述第一纹理信息的以第二格式表示所述3D对象的表面的第二纹理信息来绘制所述3D对象中的所有或一些；以及绘制单元，所述绘制单元使用指示所述3D对象的表面形状的形状信息和由所述决定单元决定的纹理信息来绘制所述3D对象。2.一种信息处理装置，包括：存储单元，所述存储单元存储指示3D对象的表面形状的形状信息、以第一格式表示所述3D对象的表面的第一纹理信息以及使用不同于所述第一纹理信息的以第二格式表示所述3D对象的表面的第二纹理信息表示的纹理信息；决定单元，当观察从绘制所述3D对象的绘制装置输出的3D对象时，所述决定单元决定将由所述存储单元存储的多个不同格式的纹理信息中的哪个纹理信息传输至所述绘制装置；以及传输单元，所述传输单元将所述形状信息和由所述决定单元决定的纹理信息传输至所述绘制装置。3.根据权利要求1所述的信息处理装置，其中，所述第一纹理信息是不依赖于用于观察所述3D对象的视点位置的纹理信息，并且所述第二纹理信息是依赖于用于观察所述3D对象的视点位置的纹理信息。4.根据权利要求3所述的信息处理装置，其中，所述决定单元基于所述3D对象在画面上的大小和将所述纹理信息传递至再现装置时的传递速度来决定使用所述第一纹理信息还是所述第二纹理信息来绘制所述3D对象。5.根据权利要求4所述的信息处理装置，其中，所述大小是所述3D对象在所述画面上的每单位长度的像素数目。6.根据权利要求4所述的信息处理装置，其中，在绘制多个3D对象时，所述绘制单元针对所述3D对象中的每个3D对象将根据所述3D对象的大小的所述第二纹理信息的传递速度相加，并且当相加的结果低于预定阈值时，使用所述第二纹理信息来绘制所述3D对象，并且当所述相加的结果等于或大于所述预定阈值时，使用所述第一纹理信息来绘制后续的3D对象。7.根据权利要求4所述的信息处理装置，其中，在绘制所述3D对象时，所述绘制单元将根据所述3D对象的大小的所述第二纹理信息的传递速度相加，并且使用所述第二纹理信息来绘制相加的结果低于预定阈值的区域，以及使用所述第一纹理信息来绘制所述相加的结果等于或大于所述预定阈值的区域。8.根据权利要求4所述的信息处理装置，其中，在绘制所述3D对象时，所述绘制单元使用所述第二纹理信息绘制其中在所述3D对象内能够获得所述第二纹理信息的区域，以及
使用所述第一纹理信息来补充缺少所述第二纹理信息的区域。9.根据权利要求1所述的信息处理装置，还包括：检测单元，所述检测单元对在观察所述3D对象时给出的操作指令进行检测，其中，所述决定单元基于由所述检测单元检测到的操作指令来决定绘制所述3D对象时的纹理信息。...

【专利技术属性】
技术研发人员：菅野尚子，广田洋一，泉伸明，大井纯司，
申请(专利权)人：索尼集团公司，
类型：发明
国别省市：