信息处理系统、信息处理方法和程序技术方案

[问题]使实时发布的内容中的进行表演的表演者能够响应于远程位置的观看者的反应进行表演。[解决方案]信息处理系统包括控制单元。控制单元从观看者的终端获取指示观看者在观看者所在的空间的坐标系中的注视的注视参数，在观看者的终端上经由网络实时地再现通过拍摄表演者的表演而获得的内容，注视参数与用于识别观看者的观看者识别信息一起被获取。控制单元将所获取的注视参数转换为指示观看者在表演者所在的空间的坐标系中的虚拟注视的注视参数。控制单元基于转换后的注视参数，向表演者所在的空间中的输出装置输出指示观看者的虚拟注视的注视信息。者的虚拟注视的注视信息。者的虚拟注视的注视信息。

【技术实现步骤摘要】
【国外来华专利技术】信息处理系统、信息处理方法和程序


[0001]本技术涉及信息处理系统、信息处理方法和程序，该信息处理系统、信息处理方法和程序能够在其中通过拍摄表演者的表演所获得的内容经由网络实时发布的系统中向表演者呈现与观看者有关的信息。

技术介绍

[0002]随着网络技术的发展，对远程位置的内容发布服务持续增长。例如，包括电影内容在内的视频发布已经通过其中发布者向观看者发布内容数据并且观看者享受发布的内容的单向系统实现。
[0003]例如，近些年，一些实时视频发布服务已经实现了其中发布者和观看者可以相互交流的双向系统。这样的系统提供了体验不仅内容本身而且还有经由内容进行交流的新价值。
[0004]在这样的系统中，从观看者到发布者的交流方式主要是文本信息和音频信息。特别地，关于文本信息，观看者输入的文本信息被叠加在发布的视频上，以便不仅实现发布者与观看者之间的交流，还实现观看者之间的交流。
[0005]作为经由网络实现交流的方法，例如，下面的专利文献1公开了在同一虚拟空间中的多个用户之间的基于文本的对等交流的方法。
[0006]此外，下面的专利文献2公开了用于检查使用同样内容的用户的彼此的状态的方法。
[0007]引用列表
[0008]专利文献
[0009]专利文献1：日本专利申请公开第2009
‑
211528号
[0010]专利文献2：日本专利第6519468号

技术实现思路

[0011]技术问题
[0012]在常规技术中，主要用文本信息和音频信息作为发布者与观看者之间的交流方式。然而，在经由网络进行的这种交流体验与在物理上近距离(可以看到伙伴的距离)进行的交流体验之间存在较大的差距。
[0013]例如，假设有以下服务。在该服务中，为了使位于远程位置的客户也能体验到在有限的地方举办的音乐现场演奏会，发布者实时获取表演者的图像和音频数据，将这些数据转换为待发布的内容数据，并经由网络将内容数据发布至电影院或各个家庭。在这种情况下，该内容作为要投影到荧幕上的内容被发布至电影院，并且也作为可以在电视设备上观看的内容或者可以用头戴式显示器(head
‑
mounted displays，HMD)观看的内容被发布至各个家庭。
[0014]在举办音乐现场演奏会的实际场地，表演者可以在检查观众有多少人、观众的位
置、他们在物理上如何分布、他们对自己的动作、方向和表演等方面的反应的同时，适当地决定接下来的动作。此外，作为观众，由于表演者在观看他们的位置和反应的同时决定接下来的动作，因此他们可以享受这种面对，即所谓的“呼唤与回应”，在“呼唤与回应”中表演者将自己的注视转向他们，他们可以回应来自表演者的呼唤或接收到来自表演者的回答，或者可以体验除听音乐之外的交流，在这种交流中他们可以感受到其他观众的反应。
[0015]然而，通过使用利用文本和音频经由网络的常规交流方式再现那些交流体验是困难的。因此，即使是同一场音乐现场演奏会的观众，在实际场地获得的体验与经由网络在远程位置获得的体验之间也存在较大的差距。
[0016]另外，随着网络技术的发展，以个人为单位使用直播流式服务的内容发布也变得更加活跃。这种内容发布通常以观看者不在实际拍摄现场并且观看者仅经由网络出现在远程位置的形式进行。在这种环境中，由于表演者无法直接看着观看者并且无法感受观看者的注视，因此表演者无法知道表演者在表演时应该看着哪里以及表演者应该将自己的脸转向哪个方向，并且表演者无法采取适当的动作。此外，存在如下问题：例如，由于表演者不能看到观看者对自己的表演的反应，因此表演者不能适当地决定接下来的动作。
[0017]即使上述专利文献1和2中描述的各个技术也没有公开在内容中出现的表演者与观看者之间的交流以及向表演者通知观看者的反应。
[0018]鉴于上述情况，本技术的目的是提供能够使在实时发布的内容中出现的表演者根据位于远程位置的观看者的反应来进行表演的信息处理系统、信息处理方法和程序。
[0019]问题的解决方案
[0020]为了实现以上提及的目的，根据本技术的实施方式的信息处理系统包括控制单元。控制单元从观看者的终端获取指示观看者在观看者所在的空间的坐标系中的注视的注视参数，在观看者的终端上经由网络实时地再现通过拍摄表演者的表演而获得的内容，该注视参数与用于识别观看者的观看者识别信息一起被获取。此外，控制单元将所获取的注视参数转换为指示观看者在表演者所在的空间的坐标系中的虚拟注视的注视参数。此外，控制单元基于转换后的注视参数，向表演者所在的空间中的输出装置输出指示观看者的虚拟注视的注视信息。
[0021]因此，信息处理系统可以使表演者注意到观看者的虚拟注视，并且即使观看者处于远程位置，也可以使表演者根据观看者的反应作出适当的表演。注视信息可以是图片信息或者可以是音频信息。此外，注视信息可以包括观看者的虚拟位置信息。
[0022]输出装置可以是显示器。在这种情况下，控制单元可以基于转换后的注视参数，计算显示器与虚拟注视的交点坐标，并且使与观看者相关联的图像作为注视信息、在与显示器的交点坐标相关联的位置处被输出。
[0023]因此，表演者可以通过观看显示器注意到处于远程位置的观看者正在看着表演者，使得表演者可以作出适当的反应，例如，看着观看者并为观看者作出表演。例如，图像可以是观看者的头像图像。
[0024]在与预定数量的观看者或更多个观看者相关联的交点坐标存在于显示器的预定区域中的情况下，控制单元可以使示出观看者组的单个预定图像被输出，而不是使与每个观看者相关联的图像被输出。
[0025]因此，信息处理系统可以防止与多个观看者相关联的图像彼此交叠显示而降低表
演者的可见度。
[0026]控制单元可以获取指示观看者的属性的属性信息连同注视参数，并且根据属性信息改变图像的输出模式。
[0027]因此，信息处理系统可以根据每个观看者的属性改变图像，从而使表演者根据该图像适当地作出动作。这里，属性包括例如年龄、性别、国籍、居住地、观看时间、出现同一表演者的内容的观看次数或购买次数、以及在内容坐标系中与表演者的距离。改变属性模式包括例如为头像图像添加不同颜色的边框、改变头像图像的大小、以及改变透明度。
[0028]控制单元可以基于转换后的注视参数，确定观看者是否正在看着表演者，并且根据确定的结果改变图像的输出模式。
[0029]因此，信息处理系统可以使表演者注意到每个观看者是否面对表演者，并且可以使表演者根据观看者的注视作出表演，例如，向正在看向表演者的观看者作出表演。
[0030]在第一时间计算的、与具有第一观看者识别信息的第一观看者相关联的第一交点坐标和在比第一时间晚的第二时间计算的、与第一观看者相关联的第二交点坐标彼此不同的情况下，控制单元可以使与观看者相关联的图像在以将第一交点坐标连接至第二交点坐标的轨迹移动时被显示。
[0031]因此，信息本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种信息处理系统，包括：控制单元，所述控制单元：从观看者的终端获取指示所述观看者在所述观看者所在的空间的坐标系中的注视的注视参数，在所述观看者的终端上经由网络实时地再现通过拍摄表演者的表演而获得的内容，所述注视参数与用于识别所述观看者的观看者识别信息一起被获取，将所获取的注视参数转换为指示所述观看者在所述表演者所在的空间的坐标系中的虚拟注视的注视参数，以及基于转换后的注视参数，向所述表演者所在的空间中的输出装置输出指示所述观看者的虚拟注视的注视信息。2.根据权利要求1所述的信息处理系统，其中，所述输出装置是显示器，并且所述控制单元基于转换后的注视参数，计算所述显示器与所述虚拟注视的交点坐标，并且使与所述观看者相关联的图像作为所述注视信息、在与所述显示器的交点坐标相关联的位置处被输出。3.根据权利要求2所述的信息处理系统，其中，在与预定数量的观看者或更多个观看者相关联的交点坐标存在于所述显示器的预定区域中的情况下，所述控制单元使示出观看者组的单个预定图像被输出，而不是使与每个观看者相关联的图像被输出。4.根据权利要求2所述的信息处理系统，其中，所述控制单元连同所述注视参数一起获取指示所述观看者的属性的属性信息，并且根据所述属性信息改变所述图像的输出模式。5.根据权利要求2所述的信息处理系统，其中，所述控制单元基于转换后的注视参数，确定所述观看者是否正在看着所述表演者，并且根据确定的结果改变所述图像的输出模式。6.根据权利要求2所述的信息处理系统，其中，在第一时间计算的、与具有第一观看者识别信息的第一观看者相关联的第一交点坐标和在比所述第一时间晚的第二时间计算的、与所述第一观看者相关联的第二交点坐标彼此不同的情况下，所述控制单元使与所述观看者相关联的图像在以将所述第一交点坐标连接至所述第二交点坐标的轨迹移动时被显示。7.根据权利要求2所述的信息处理系统，还包括：存储单元，所述存储单元存储指示能够与所述图像一起被再现的多个类型的特效的信息，所述信息与用于识别所述特效的特效识别信息相关联地被存储，其中，在所述控制单元已经从所述观看者的终端接收到包括所述观看者识别信息和所述特效识别信息的特效再现请求的情况下，所述控制单元使与所述特效识别信息相关联的特效从与所述观看者识别信息相关联的交点坐标附近被输出。8.根据权利要求7所述的信息处理系统，其中，在与所述预定数量的观看者或更多的观看者相关联的特效再现请求存在于所述显示器的预定区域中的情况下，所述控制单元使单个预定特效被输出，而不是使...

【专利技术属性】
技术研发人员：本间俊一，
申请(专利权)人：索尼集团公司，
类型：发明
国别省市：