热图展示装置以及热图展示用程序制造方法及图纸

本发明专利技术具备：生成因子检测部(13)，其根据三维图像内视听者正观看的区域的检测结果，针对将三维图像分割后的多个区域的每一个，将被视听者观看的次数以及时间作为热图的多个生成因子进行检测；以及热图生成部(14)，其根据该检测出的多个生成因子生成三维空间用的热图；通过根据多个生成因子生成显示于三维空间上的热图，能够利用维数比显示于二维空间的现有热图多的三维空间上的热图，提供基于多个生成因子的多元信息。

【技术实现步骤摘要】
【国外来华专利技术】热图展示装置以及热图展示用程序
本专利技术涉及热图展示装置以及热图展示用程序，尤其是适合用于分析视听者对三维图像的视听状况并展示为热图的装置。
技术介绍
近年来，让人宛如现实般地体验计算机中创造的虚拟世界的虚拟现实(VR：VirtualReality)技术得到广泛应用。VR大致分为向用户呈现利用计算机图形等制作的三维图像和向用户呈现通过将拍摄现实世界而取得的动态图像加工成VR用而制作的三维图像这两种。作为后者的一个例子，还提供了一种被称为360度动态图像的技术，该360度动态图像使得能够与视听者的视线运动对应地进行360度全方位观看。VR的应用例多种多样，但一般是用户佩戴护目镜那样的HMD(头戴式显示器)，并在通过计算机于HMD上作为三维图像而描绘出的三维空间中自由移动，由此用户能够虚拟地进行各种体验。有时也使用眼镜型或帽子型的HMD来代替护目镜型的HMD。VR也能够呈现给用户超越时间和空间这样的现实制约的世界。与现有的内容相比，VR内容具有用户能够自由地选择观看方向这一特征。另一方面，由于不知道用户在三维空间中观看何处，因此存在开发者无法获知应该将重点放在何处而对VR内容进行制作及改善这一问题。对于该问题，提供有分析用户对VR内容的注视点而进行热图显示的技术(例如，参考非专利文献1)。根据该非专利文献1所记载的InstaVR这一技术，当使热图分析功能有效时，由InstaVR作成的应用程序自动地收集用户的注视点信息，并发送至InstaVR的分析平台。InstaVR的使用者能够利用热图掌握在浏览器上的VR内容编辑画面中用户正观看的区域以及视线的移动顺序，从而能够进行基于分析事实的有效VR内容的制作以及调整。此外，在专利文献1中，也公开了在VR内容中检测并以热图显示用户所凝视的位置(参考权利要求57、段落[0303]、[0319]等)。即，在专利文献1所记载的VR系统中，对于包含三维影像数据中被压缩的流的虚拟现实内容检测用户进行凝视的位置，根据每个位置的用户凝视的数量(观看了特定位置的用户的数量)而生成包括不同颜色的热图。专利文献1：日本专利特表2016-537903号公报非专利文献1：对于VR体验者在“观看何处”进行热图分析「InstaVR」2016.4.26https://japan.cnet.com/article/35081481/
技术实现思路
如上所述，通过将用户对VR内容的注视点进行分析并进行热图显示，能够掌握在VR内容中较多的用户所观看的区域。然而，上述现有技术中显示的热图是通过二维图像表现的。因此，存在下述问题：即使观察如上所述作成的热图，也仅能获知VR内容上被用户观看的次数较多的位置，而无法获得进一步的信息。本专利技术是为了解决上述问题而形成的，其目的在于，针对用户对于在三维空间中显示为VR内容的三维图像的视听状况，能够通过热图提供多元信息。为了解决上述问题，在本专利技术中，根据作为在虚拟三维空间上所显示的三维图像内视听者正观看的区域的检测结果而得到的目视区域信息，针对将三维图像分割后的多个区域的每一个，将被视听者观看的次数以及被视听者观看的时间作为热图的多个生成因子进行检测，根据该检测出的多个生成因子生成三维空间用的热图，并显示在三维空间上。(专利技术效果)根据如上所述构成的本专利技术，使用多个生成因子作为生成热图时所用的因子，并根据该多个生成因子，生成在三维空间上显示的热图。由此，针对视听者对于显示在三维空间上的三维图像的视听状况，利用维数比显示于二维空间的现有热图多的三维空间上的热图，能够提供基于多个生成因子的多元信息。附图说明图1是表示使用了本实施方式的热图展示装置的VR视听系统的整体结构例的图。图2是用于说明视听者的目视区域的检测方法的一例的图。图3是表示第一实施方式的热图展示装置的功能结构例的框图。图4是表示在生成热图时使用的多个分割区域的图。图5是表示第二实施方式的热图展示装置的功能结构例的框图。图6是表示第二实施方式的热图的生成例的图。图7是表示第三实施方式的热图展示装置的功能结构例的框图。图8是表示第三实施方式的热图的生成例的图。图9是表示第三实施方式中用户位置与映射位置的相对距离为零时的热图的生成例的图。(符号说明)11：目视区域信息取得部12：动态信息取得部13：生成因子检测部14、14’、14”：热图生成部15：热图显示控制部16：用户位置检测部100：服务器装置(热图展示装置)200：用户终端300：视听者终端具体实施方式以下，根据附图对本专利技术的一实施方式进行说明。图1是表示使用了本实施方式的热图展示装置的VR视听系统的整体结构例的图。如图1所示，本实施方式的VR视听系统构成为包括：服务器装置100、用户终端200以及多个视听者终端300。用户终端200具备HMD(头戴式显示器)201。视听者终端300具备再生装置301、HMD302、控制器303以及动作传感器304。另外，再生装置301以及HMD302可以是如图所示的分别独立地构成的结构，也可以是两者作为一个计算机而提供的结构。再生装置301与服务器装置100之间构成为能够经由因特网或手机网络等通信网络400进行连接。此外，用户终端200与服务器装置100之间也构成为能够经由通信网络400进行连接。详细如后所述，根据从多个再生装置301发送至服务器装置100的、表示视听者对于VR内容的视听状况或视听者的身体动作的信息，在服务器装置100中生成热图。此外，在服务器装置100中生成的热图被展示于用户终端200。使用用户终端200的用户是VR内容的开发者，能够参照被展示的热图进行VR内容的制作或调整。再生装置301将作为VR内容的三维图像进行再生。三维图像是用于制作VR的虚拟三维空间的视差图像，并且是内容随时间变化的动态图像。例如，三维图像是被称为能够与视听者的视线移动对应地进行360度全方位观看的360度动态图像。通过再生装置301再生后的三维图像被显示在视听者佩戴的HMD302上。在显示三维图像的HMD302中搭载有陀螺仪传感器或加速度传感器，能够检测视听者头部的动作。然后，再生装置301以下述方式控制三维图像的再生：即，与HMD302的传感器所检测到的视听者头部的动作相应地，HMD302的显示画面上所实现的三维空间动态地变化这一方式。即，再生装置301再生以下三维图像：若视听者朝向正面则正面的三维空间扩大这样的三维图像，若视听者朝向右边则右侧的三维空间扩大这样的三维图像，若视听者朝向左边则左侧的三维空间扩大这样的三维图像。再生装置301具有在虚拟三维空间上所显示的三维图像内检测视听者观看的区域这一功能。即，如图2所示，再生装置301将设定于HMD302的显示画面的中央部的规定区域(以下称为“画面中央区域30”)作为视听者观看的目视区域进行检测。如上所述，由于HMD本文档来自技高网...

【技术保护点】
1.一种热图展示装置，其特征在于，具备：/n目视区域信息取得部，该目视区域信息取得部取得作为在虚拟三维空间上所显示的三维图像内视听者正观看的区域的检测结果而获得的目视区域信息；/n生成因子检测部，该生成因子检测部根据所述目视区域信息，针对将所述三维图像分割后的多个区域的每一个，将被所述视听者观看的次数以及被所述视听者观看的时间作为热图的多个生成因子进行检测；/n热图生成部，该热图生成部根据所述生成因子检测部所检测出的所述多个生成因子，生成显示于所述三维空间上的热图；以及/n热图显示控制部，该热图显示控制部使所述热图生成部所生成的热图显示在所述三维空间上。/n

【技术特征摘要】
【国外来华专利技术】20180606 JP 2018-1090781.一种热图展示装置，其特征在于，具备：
目视区域信息取得部，该目视区域信息取得部取得作为在虚拟三维空间上所显示的三维图像内视听者正观看的区域的检测结果而获得的目视区域信息；
生成因子检测部，该生成因子检测部根据所述目视区域信息，针对将所述三维图像分割后的多个区域的每一个，将被所述视听者观看的次数以及被所述视听者观看的时间作为热图的多个生成因子进行检测；
热图生成部，该热图生成部根据所述生成因子检测部所检测出的所述多个生成因子，生成显示于所述三维空间上的热图；以及
热图显示控制部，该热图显示控制部使所述热图生成部所生成的热图显示在所述三维空间上。


2.如权利要求1所述的热图展示装置，其特征在于，
进一步具备动作信息取得部，该动作信息取得部取得作为在所述三维图像的显示中所述视听者观看所期望的区域时所述视听者身体上的动作的检测结果而获得的动作信息；
所述生成因子检测部针对所述目视区域信息所表示的所述视听者正观看的区域，将所述动作信息所表示的所述视听者身体上的动作状况进一步作为所述热图的生成因子进行检测。


3.如权利要求1或2所述的热图展示装置，其特征在于，
进一步具备用户位置检测部，该用户位置检测部检测用户位置，所述用户位置表示通过所述热图显示控制部而显示有所述热图的所述三维空间内的用户的虚拟存在位置；
所述热图生成部根据所述用户位置检测部所检测出的所述三维空间内的所述用户位置与表示所述三维空间内所述热图的虚拟存在位置的映射位置的相对关系，生成外观不同的热图。


4.如权利要求3所述的热图展示装置，其特征在于，
所述热图生成部根据所述多个生成因子的任一个或多个的组合而确定所述热图在平面上的显示形态，同时根据所述多个生成因子的剩余部分而确定所述热图在深度上的显示形态，并根据该确定内容而生成所述热图。


5.如权利要求3或4所述的热图展示装置，其特征在于，
所述热图生成部根据所述用户位置检测部所检测出的所述三维空间内的所述用...

【专利技术属性】
技术研发人员：水野拓宏，
申请(专利权)人：株式会社阿尔法代码，
类型：发明
国别省市：日本;JP