终端装置制造方法及图纸

本实用新型专利技术涉及一种终端装置。该终端装置包括：拍摄部，从第1视点拍摄实际空间以生成拍摄图像；通信部，将拍摄图像发送给服务器，并且从服务器接收输出图像，其中，该输出图像为服务器基于第1视点在实际空间中的位置以及姿势，生成的从在实际空间中具有与第1视点不同的位置以及姿势的第2视点虚拟地拍摄实际空间得到的第2图像；以及显示部，显示从服务器接收的输出图像。

【技术实现步骤摘要】

本技术涉及图像处理装置。
技术介绍
近些年，将附加的信息叠加于实际世界并提示给用户的被称为增强现实(AR:Augmented Reality)的技术备受瞩目。在AR技术中提示给用户的信息也被称作(annotat1n)，可以使用文本、图标或者动画等各种方式的虚拟的物体进行可视化。例如，在专利文献I中记载有不损害用户对AR空间的浸没感地实现这样的AR的虚拟物体的操作的技术。专利文献1:日本特开2012 — 212345号公报在上述专利文献I等中提出的AR技术被开发的时间还不长，不能说在各个方面充分提出了活用AR的技术。例如，用于使利用了 AR技术的用户间的交互顺利的技术也是还没有被充分提出的技术之一。
技术实现思路
因此，在本技术中，提出一种能够使利用了 AR技术的用户间的交互更为顺利的、新改进的图像处理装置。根据本技术，提供一种图像处理装置，该图像处理装置具备图像处理部，该图像处理部将从第I视点拍摄实际空间得到的第I图像作为输入图像来生成输出图像，上述图像处理部基于上述第I视点在上述实际空间中的位置以及姿势，来生成从在上述实际空间中具有与上述第I视点不同的位置以及姿势的第2视点虚拟地拍摄上述实际空间得到的第2图像作为上述输出图像。在上述图像处理装置中，以上述第I视点的位置以及姿势为基准来设定上述第2视点的位置以及姿势。在上述图像处理装置中，还具备显示控制部，上述显示控制部控制终端装置的显示部来显示上述输出图像，上述图像处理部基于上述第I视点在上述实际空间中的位置以及姿势，来生成从在上述实际空间中任意地设定位置以及姿势的第3视点虚拟地拍摄上述实际空间得到的第3图像作为上述输出图像，上述显示控制部使上述显示部显示上述第2图像和上述第3图像中的任一方或者两方。在上述图像处理装置中，上述显示控制部使上述显示部显示至少上述第3图像，在上述第2视点被包含在上述第3图像的范围内的情况下，上述图像处理部使表示上述第2视点的图标显示在上述第3图像上。在上述图像处理装置中，还具备操作获取部，上述操作获取部获取基于针对上述显示部所显示的图像的用户操作的信息，在基于选择表示上述第2视点的图标的用户操作的信息已被获取的情况下，上述图像处理部使上述第2图像与上述第3图像一起或者代替上述第3图像作为上述输出图像来加以提供。在上述图像处理装置中，上述第2视点是使上述第I视点后退形成的视点。在上述图像处理装置中，上述图像处理部基于连续地拍摄的上述第I图像连续地生成上述第2图像，上述第2视点的位置以及姿势追随上述第I视点的位置以及姿势而变化。在上述图像处理装置中，上述图像处理部使上述第I视点的位置以及姿势的变化平滑地反映于上述第2视点的位置以及姿势。在上述图像处理装置中，上述图像处理部对上述第2视点的位置以及姿势的变化量设定限制，并且基于上述第I视点的位置以及姿势和上述第2视点的位置以及姿势之间的关系，在显示在上述第2图像内的上述第I图像从上述第2图像的范围偏移规定比例以上的情况下解除上述限制。在上述图像处理装置中，以配置于上述实际空间的物体的位置以及姿势为基准来设定上述第2视点的位置以及姿势。在上述图像处理装置中，在上述第I视点被包含在上述第2图像的范围内的情况下，上述图像处理部使表示上述第I视点的图标显示于上述第2图像。在上述图像处理装置中，还具备:显示控制部，其控制终端装置的显示部来显示上述输出图像；和操作获取部，其获取基于针对上述显示部所显示的图像的用户操作的信息，在基于选择表示上述第I视点的图标的用户操作的信息已被获取的情况下，上述图像处理部使第I图像与上述第2图像一起或者代替上述第2图像作为上述输出图像来加以提供。在上述图像处理装置中，上述图像处理部将上述实际空间中的位置以及姿势彼此不同的多个视点中的任意一个视点作为上述第2视点来生成上述第2图像，并且在上述多个视点中的其它视点被包含在上述第2图像的范围内的情况下，使表示上述其它视点的图标显示于上述第2图像。在上述图像处理装置中，还具备:显示控制部，其控制终端装置的显示部来显示上述输出图像；和操作获取部，其获取基于针对上述显示部所显示的图像的用户操作的信息，在基于选择表示上述其它视点的图标的用户操作的信息已被获取的情况下，上述图像处理部将与上述选择出的图标对应的上述其它视点作为上述第2视点来生成上述第2图像，将新生成的上述第2图像和原来的上述第2图像一起或者代替原来的上述第2图像作为上述输出图像来加以提供。在上述图像处理装置中，上述图像处理部基于上述第I视点的位置以及姿势和上述第2视点的位置以及姿势之间的关系，使变形了的上述第I图像显示在上述第2图像内。在上述图像处理装置中，上述图像处理部基于连续地拍摄的上述第I图像连续地生成上述第2图像，使最新的上述第I图像显示在上述第2图像内，并且基于过去的上述第I图像来生成上述第2图像中的上述最新的第I图像以外的部分。在上述图像处理装置中，上述图像处理部通过上述最新的第I图像和上述过去的第I图像之间或者上述过去的第I图像彼此之间的拼接，来生成上述第2图像中的上述最新的第I图像以外的部分。在上述图像处理装置中，上述图像处理部将从上述实际空间中的位置以及姿势彼此不同的多个上述第I视点拍摄上述实际空间得到的多个上述第I图像作为输入图像来生成上述输出图像，并且基于上述多个第I视点各自的位置以及姿势和上述第I视点的位置以及姿势之间的关系来使变形的上述多个第I图像显示在上述第2图像内。根据本申请的一个方面，提供了一种终端装置，包括:拍摄部，从第I视点拍摄实际空间以生成拍摄图像；通信部，将所述拍摄图像发送给服务器，并且从所述服务器接收输出图像，其中，所述输出图像为所述服务器基于所述第I视点在所述实际空间中的位置以及姿势，生成的从在所述实际空间中具有与所述第I视点不同的位置以及姿势的第2视点虚拟地拍摄所述实际空间得到的第2图像；以及显示部，显示从所述服务器接收的所述输出图像。如以上说明那样，根据本技术，能够使利用了 AR技术的用户间的交互更为顺利。【附图说明】图1是表示本技术的一个实施方式的系统的概要构成的图。图2是表示本技术的一个实施方式的装置的概要构成的图。图3A是表示本技术的一个实施方式中的拍摄图像的共享的例子的图。图3B是表示本技术的一个实施方式中的注解输入的例子的图。图4是表示本技术的一个实施方式中的拍摄图像的共享的其它例子的图。图5A是表示在本技术的一个实施方式中能够利用的技术的处理的例子的流程图。图5B是表示在本技术的一个实施方式中能够利用的技术的处理的其它的例子的流程图。图6是表示本技术的一个实施方式中的I人称图像的显示例的图。图7是表示本技术的一个实施方式中的3人称图像的显示例的图。图8是表示本技术的一个实施方式中的3人称图像的显示例的图。图9是表示本技术的一个实施方式中的3人称图像的显示例的图。图1OA是表示本技术的一个实施方式中的1.3人称图像的显示例的图。图1OB是用于说明本技术的一个实施方式中的1.3人称图像的图。图1OC是用于说明本技术的一个实施方式中的1.3人称图像的图。图1OD是用于说明本技术的一个实施方式中的1.3人称本文档来自技高网...

【技术保护点】
一种终端装置，包括：拍摄部，从第1视点拍摄实际空间以生成拍摄图像；通信部，将所述拍摄图像发送给服务器，并且从所述服务器接收输出图像，其中，所述输出图像为所述服务器基于所述第1视点在所述实际空间中的位置以及姿势，生成的从在所述实际空间中具有与所述第1视点不同的位置以及姿势的第2视点虚拟地拍摄所述实际空间得到的第2图像；以及显示部，显示从所述服务器接收的所述输出图像。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：笠原俊一，暦本纯一，
申请(专利权)人：索尼公司，
类型：新型
国别省市：日本;JP