图像处理装置、图像处理方法和记录介质制造方法及图纸

本技术涉及能够提高用户的可操作性的图像处理装置、图像处理方法和记录介质。提供了一种设置有图像处理单元的图像处理装置，该图像处理单元执行以下控制：在三维虚拟空间中布置虚拟空间的虚拟摄像装置，并且使显示终端显示表示虚拟空间的背景图像以及布置在背景图像内的虚拟对象；基于由显示终端测量的测量信号来确定显示终端的俯仰旋转；基于显示终端的俯仰旋转的确定结果，使虚拟摄像装置在俯仰方向上绕虚拟对象旋转；确定显示终端的触摸面板上的触摸操作；以及基于触摸操作的确定结果，使虚拟摄像装置在虚拟空间中在偏摆方向上绕虚拟对象旋转。本技术可以应用于例如移动终端。端。端。

【技术实现步骤摘要】
【国外来华专利技术】图像处理装置、图像处理方法和记录介质


[0001]本技术涉及图像处理装置、图像处理方法和记录介质，并且更具体地，涉及能够提高用户的可操作性的图像处理装置、图像处理方法和记录介质。

技术介绍

[0002]已知一种用于生成虚拟三维空间、在三维空间中设置视点(虚拟摄像装置位置)、以及将从虚拟摄像装置位置观看的三维空间显示为3D图像的技术(参考专利文献1至3)。
[0003]引用列表
[0004]专利文献
[0005]专利文献1：WO 2009/084213
[0006]专利文献2：日本专利申请特许公开第2003
‑
334379号
[0007]专利文献3：日本专利申请特许公开第2002
‑
298160号

技术实现思路

[0008]本专利技术要解决的问题
[0009]顺便提及，当观察三维虚拟空间中的观察目标时，需要使虚拟摄像装置能够相对于观察目标直观地移动，以增强用户的可操作性。
[0010]本技术是鉴于上述情况而开发的，并且用于提高用户的可操作性。
[0011]问题的解决方案
[0012]根据本技术的一个方面的图像处理装置包括图像处理单元，该图像处理单元：在三维虚拟空间中设置指定虚拟空间中的区域的虚拟摄像装置，该区域由显示终端显示；执行控制使得显示终端显示表示虚拟空间的背景图像以及设置在背景图像中的虚拟对象；基于由显示终端测量的测量信号来确定显示终端的俯仰旋转；基于显示终端的俯仰旋转的确定结果，使虚拟摄像装置在俯仰方向上绕虚拟对象旋转；确定显示终端的触摸面板上的触摸操作；以及基于触摸操作的确定结果，使虚拟摄像装置在虚拟空间中在偏摆方向上绕虚拟对象旋转。
[0013]根据本技术的一个方面的图像处理方法包括：通过图像处理装置：在三维虚拟空间中设置指定虚拟空间中的区域的虚拟摄像装置，该区域由显示终端显示；执行控制使得显示终端显示表示虚拟空间的背景图像以及设置在背景图像中的虚拟对象；基于由显示终端测量的测量信号来确定显示终端的俯仰旋转；基于显示终端的俯仰旋转的确定结果，使虚拟摄像装置在俯仰方向上绕虚拟对象旋转；确定显示终端的触摸面板上的触摸操作；以及基于触摸操作的确定结果，使虚拟摄像装置在虚拟空间中在偏摆方向上绕虚拟对象旋转。
[0014]根据本技术的一个方面的记录介质记录有程序，该程序用于使计算机用作图像处理单元，该图像处理单元：在三维虚拟空间中设置指定虚拟空间中的区域的虚拟摄像装置，该区域由显示终端显示；执行控制使得显示终端显示表示虚拟空间的背景图像以及设置在
背景图像中的虚拟对象；基于由显示终端测量的测量信号来确定显示终端的俯仰旋转；基于显示终端的俯仰旋转的确定结果，使虚拟摄像装置在俯仰方向上绕虚拟对象旋转；确定显示终端的触摸面板上的触摸操作；以及基于触摸操作的确定结果，使虚拟摄像装置在虚拟空间中在偏摆方向上绕虚拟对象旋转。
[0015]在根据本技术的一个方面的图像处理装置、图像处理方法和记录介质中，在三维虚拟空间中设置指定虚拟空间中的区域的虚拟摄像装置，该区域由显示终端显示；执行控制使得显示终端显示表示虚拟空间的背景图像以及设置在背景图像中的虚拟对象；基于由显示终端测量的测量信号来确定显示终端的俯仰旋转；基于显示终端的俯仰旋转的确定结果，使虚拟摄像装置在俯仰方向上绕虚拟对象旋转；确定显示终端的触摸面板上的触摸操作；以及基于触摸操作的确定结果，使虚拟摄像装置在虚拟空间中在偏摆方向上绕虚拟对象旋转。
[0016]应注意，根据本技术的一个方面的图像处理装置可以是独立装置，或者可以是包括一个装置的内部块。
附图说明
[0017]图1是用于描述屏幕倾斜系统中的俯仰旋转和偏摆旋转的图。
[0018]图2是用于以混合系统描述视点的图。
[0019]图3是示出屏幕触摸操作中指尖在X方向和Y方向上的移动的图。
[0020]图4是示出屏幕触摸操作中两个指尖之间的中点和距离的图。
[0021]图5是示出屏幕倾斜操作中的俯仰旋转和偏摆旋转的图。
[0022]图6是示出设置在虚拟空间中的虚拟摄像装置、在俯仰方向上绕虚拟对象的旋转以及在偏摆方向上绕虚拟对象的旋转之间的关系的图。
[0023]图7是示出应用本技术的3D图像显示系统的配置的示例的图。
[0024]图8是示出图7中的显示终端的硬件配置的示例的图。
[0025]图9是示出图8中的显示终端的功能配置的示例的图。
[0026]图10是描述显示处理的流程的流程图。
[0027]图11是描述与用户的操作对应的图像处理流程的流程图。
[0028]图12是示出世界坐标系与虚拟摄像装置坐标之间的关系的图。
[0029]图13是示出新系统中的屏幕触摸操作和屏幕倾斜操作与虚拟摄像装置的移动之间的对应关系的图。
[0030]图14是示出计算机的配置的示例的图。
具体实施方式
[0031]在下文中，将参照附图描述本技术的实施方式。注意，将按照以下顺序进行描述。
[0032]1.本技术的实施方式
[0033]2.修改
[0034]3.计算机的配置
[0035]<1.本技术的实施方式>
[0036]作为用于观察在三维虚拟空间中与背景图像一起显示的虚拟对象的用户界面
(UI)，存在一种用于使虚拟摄像装置绕观察目标移动的系统。该系统的示例包括屏幕倾斜系统和屏幕触摸系统。
[0037]屏幕倾斜系统是用于通过诸如智能电话的显示终端的屏幕的倾斜使虚拟摄像装置绕观察目标转动的系统。屏幕触摸系统是用于通过显示终端的屏幕上的触摸操作来移动虚拟摄像装置位置的系统。此外，还存在其中将屏幕倾斜系统和屏幕触摸系统进行组合的混合系统。
[0038]在屏幕倾斜系统中，显示终端的俯仰旋转与用户的握持显示终端的手的俯仰旋转(手腕的俯仰旋转)对应。在使用屏幕倾斜系统的情况下，与使用屏幕触摸系统的情况不同，虚拟摄像装置的取向基本上与显示终端的取向相关联。
[0039]因此，利用屏幕倾斜系统，可以直观地识别虚拟摄像装置的取向，并且不太可能发生如在使用屏幕触摸系统的情况下的旋转方向的错误识别(错误操作)。因此，从设置在虚拟空间中的虚拟对象的观察视点来看，与使用屏幕触摸系统的情况相比，屏幕倾斜系统可以向用户提供更直观的操作。
[0040]此外，利用屏幕倾斜系统，响应于从终端倾斜检测器(例如惯性测量单元(IMU))输出的俯仰旋转信号来执行虚拟摄像装置在俯仰方向上的旋转(绕虚拟对象的转动)。此时，如果用户仅移动手腕，则由于手中握持的显示终端的俯仰旋转，显示终端的屏幕不面向用户。
[0041]如果屏幕通过显示终端的俯仰旋转而朝向上或朝向下，则用户自然地调整自己的姿势，类似于观看或查看真实对象的日常移动，使得屏幕面向用户(的面部)。
[0042]更具体地，在通过用户的手腕的移动使显示终端本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种图像处理装置，包括：图像处理单元，所述图像处理单元：在三维虚拟空间中设置指定所述虚拟空间中的区域的虚拟摄像装置，所述区域由显示终端显示，执行控制，使得所述显示终端显示表示所述虚拟空间的背景图像以及设置在所述背景图像中的虚拟对象，基于由所述显示终端测量的测量信号来确定所述显示终端的俯仰旋转，基于所述显示终端的俯仰旋转的确定结果，使所述虚拟摄像装置在俯仰方向上绕所述虚拟对象旋转，确定所述显示终端的触摸面板上的触摸操作，以及基于所述触摸操作的确定结果，使所述虚拟摄像装置在所述虚拟空间中在偏摆方向上绕所述虚拟对象旋转。2.根据权利要求1所述的图像处理装置，其中，所述图像处理单元不将所述触摸操作的确定结果反映在所述虚拟摄像装置在所述虚拟空间中在所述俯仰方向上的旋转中。3.根据权利要求2所述的图像处理装置，其中，所述背景图像包括具有至少180度的视角或更宽视角的广角图像，并且所述图像处理单元不将所述显示终端在真实空间中的实际位置反映在所述虚拟摄像装置的移动中。4.根据权利要求1所述的图像处理装置，其中，所述虚拟摄像装置在所述俯仰方向和所述偏摆方向上的旋转包括所述虚拟摄像装置绕所述虚拟对象的转动。5.根据权利要求1所述的图像处理装置，其中，所述图像处理单元：基于由所述显示终端测量的测量信号，确定所述显示终端的俯仰旋转和偏摆旋转，并且基于所述显示终端的俯仰旋转和偏摆旋转的确定结果，使所述虚拟摄像装置在所述俯仰方向或所述偏摆方向中的至少一个方向上绕所述虚拟对象旋转。6.根据权利要求2所述的图像处理装置，其中，在所述触摸面板上执行水平方向上的预定操作作为所述触摸操作的情况下，所述图像处理单元使所述虚拟摄像装置在所述虚拟空间中在所述偏摆方向上绕所述虚拟对象旋转。7.根据权利要求6所述的图像处理装置，其中，在所述触摸面板上执行垂直方向上的预定操作作为所述触摸操作的情况下，所述图像处理单元不将所述触摸操作反映在所述虚拟摄像装置在所述虚拟空间中在所述俯仰方向上的...

【专利技术属性】
技术研发人员：石川毅，大井智博，山崎乔辅，池田康，
申请(专利权)人：索尼集团公司，
类型：发明
国别省市：