用于处理和呈现媒体数据以允许虚拟参与事件的系统和方法技术方案

一种在事件期间在场所处招待虚拟观众的说明性示例方法包括：分发将由位于远离场所的多个用户设备接收的事件的可观察表示；从远离场所的多个虚拟参加者中的每一个接收媒体流，每个所接收的媒体流包括多个虚拟参加者中的至少一个的视觉表示；以及在场所处的显示器上显示虚拟参加者中的至少一些的视觉表示，使得虚拟参加者看起来正在该场所参加事件。虚拟参加者看起来正在该场所参加事件。虚拟参加者看起来正在该场所参加事件。

【技术实现步骤摘要】
【国外来华专利技术】用于处理和呈现媒体数据以允许虚拟参与事件的系统和方法
[0001]相关申请的交叉引用
[0002]本申请要求于2020年4月17日提交的美国临时申请号63/011,538、于2020年4月24日提交的美国临时申请号63/015,173、于2020年4月30日提交的美国临时申请号63/018,314和于2020年8月19日提交的美国临时申请号63/067,713的优先权。


[0003]本文描述的实施例总体上涉及提供数字内容，并且更特别地涉及用于虚拟参与现场事件的系统和方法。

技术介绍

[0004]诸如相机、计算机、移动设备的电子设备的可用性和能力方面的增加已经允许一些人捕获他们的经历的媒体(诸如，拍摄照片、捕获视频和/或记录音频)。而且，网络系统的能力和容量方面的增加以及网络带宽的可用性方面的增加已经允许一些人通过网络向一个或多个电子设备共享媒体，包括实时或基本实时的媒体共享(例如，“现场流式传输”和/或“流式传输媒体”)。在一些情况下，诸如体育赛事、音乐会、集会、毕业典礼等的场所和/或事件具有能够捕获媒体的、可以拍摄在场所发生的事件和/或出席的观众的成员的照片、记录其视频和/或记录其音频的相机或其他设备。图片、视频和/或音频又可以经由无线电、电视和/或一个或多个网络(例如，互联网)传播，从而允许人们远程(例如，在他或她的家里、办公室、经由移动设备等)欣赏事件。
[0005]虽然一些人能够观看或收听在该场所发生的事件的(多个)广播，但是这些人通常不能参与、互动和/或以其他方式成为在该场所实际参加现场事件的观众的一员。而且，某些社会和/或环境问题有时会使人们实际参加现场事件变得不切实际和/或不可能。例如，应对细菌或病毒爆发或疫情的“社交距离措施”和/或“居家令”可能使得观众成员不再被允许参加现场事件。缺少现场事件的观众反过来可能对参赛者或表演者具有负面影响和/或可能导致现场事件被取消。

技术实现思路

[0006]一种在事件期间在场所处招待虚拟观众的说明性示例方法包括：分发将由位于远离场所的多个用户设备接收的事件的可观察表示；从远离场所的多个虚拟参加者中的每一个接收媒体流，每个所接收的媒体流包括多个虚拟参加者中的至少一个的视觉表示；以及在场所处的显示器上显示虚拟参加者中的至少一些的视觉表示，使得虚拟参加者看起来正在该场所参加事件。
[0007]在具有前一段落的方法的至少一个特征的示例实施例中，所接收的媒体流包括表示由虚拟参加者发出的标示声音的音频，并且该方法包括在场所内再现声音，使得虚拟参加者发出的声音在场所是可听见的。
[0008]具有前述段落中的任何一个的方法的至少一个特征的示例实施例包括确定对应
于每个所接收的媒体流的场景信息，并且选择虚拟参加者中的至少一些用于基于场景信息进行显示。
[0009]具有前述段落中的任何一个的方法的至少一个特征的示例实施例包括使用面部识别或语音识别中的至少一个来识别每个所接收的媒体流中的至少一个个体，将面部识别或语音识别的结果包括在场景信息中，以及基于面部识别或语音识别的所包括的结果来选择虚拟参加者中的至少一些。
[0010]具有前述段落中的任何一个的方法的至少一个特征的示例实施例包括基于面部识别或语音识别的结果选择场所内被识别的个体的视觉表示的位置。
[0011]具有前述段落中的任何一个的方法的至少一个特征的示例实施例包括基于面部识别或语音识别的结果对场所内的多个虚拟参加者中的一些的视觉表示进行分组。
[0012]具有前述段落中的任何一个的方法的至少一个特征的示例实施例包括确定包括被识别的个体的媒体流的至少一个其他特征，以及基于该至少一个其他特征选择在场所内被识别的个体的视觉表示的位置。
[0013]具有前述段落中的任何一个的方法的至少一个特征的示例实施例包括基于多个虚拟参加者中的一些的相应媒体流的所确定的至少一个其他特征之间的相似性，对场所内的多个虚拟参加者中的一些的视觉表示进行分组。
[0014]在具有前述段落中的任何一个的方法的至少一个特征的示例实施例中，场景信息包括关于所接收的媒体流中的相对应的一个的用户简档数据，并且该方法包括基于用户简档数据确定所接收的媒体流中的相对应的一个的视觉表示是否应该包括在所显示的虚拟参加者当中。
[0015]具有前述段落中的任何一个的方法的至少一个特征的示例实施例包括：基于以下中的至少一个在事件期间在虚拟参加者中的一些之间建立对等联网会话：由虚拟参加者中的一个在与虚拟参加者中的至少一个其他虚拟参加者进行对等联网会话中进行的选取或选择、或者指示虚拟参加者中的一些之间的关联性的多个虚拟参加者中的一些中的每一个的用户简档数据。
[0016]具有前述段落中的任何一个的方法的至少一个特征的示例实施例包括确定虚拟参加者中的至少一个在事件期间出现在事件的分布式可观察表示中或者出现在场所处的专用显示器上，以及在事件期间或之后向虚拟参加者中的至少一个发送媒体文件，其中所发送的媒体文件包括虚拟参加者中的至少一个的出现。
[0017]在具有前述段落中的任何一个的方法的至少一个特征的示例实施例中，显示包括将虚拟参加者中的每一个的视觉表示放置在相应的区块中，并且基于显示器上的虚拟参加者的数量选择区块的大小。
[0018]具有前述段落中的任何一个的方法的至少一个特征的示例实施例包括选择虚拟参加者中的至少一个，并且对于事件的至少一部分，与虚拟参加者的视觉表示中的其他视觉表示不同地显示虚拟参加者中的所选择的至少一个的视觉表示。
[0019]具有前述段落中的任何一个的方法的至少一个特征的示例实施例包括促进在场所处加入事件的个体和虚拟参加者中的所选择的至少一个之间的交互，同时与虚拟参加者的视觉表示中的其他视觉表示不同地显示虚拟参加者中的所选择的至少一个的视觉表示。
[0020]具有前述段落中的任何一个的方法的至少一个特征的示例实施例包括基于从虚
拟参加者中的至少一个接收的媒体流的至少一个特征，从显示器移除虚拟参加者中的一个的视觉表示，其中至少一个特征是低于最小质量阈值的质量、低于最小阈值的连接速率、数据分组的丢失、虚拟参加者中的一个的视觉表示的缺失或不适当的内容。
[0021]用于在事件期间在场所处招待虚拟观众的系统的说明性示例实施例包括位于该场所处相机布置。照相布置被配置成捕获事件的可观察表示。分发设备被配置为分发将由位于远离场所的多个用户设备接收的事件的可观察表示。主机设备包括通信接口，该通信接口被配置为从位于远离场所的多个虚拟参加者用户设备中的每一个接收媒体流。每个所接收的媒体流包括多个虚拟参加者中的至少一个的视觉表示。该主机设备包括至少一个处理器，该至少一个处理器被配置为分析所接收的媒体流，并选择多个虚拟参加者中的相对应的参加者的视觉表示中的至少一些。至少一个显示器位于该场所处。主机设备使得至少一个显示器包括所选择的虚拟表示的视觉表示，使得对应于所选择的视觉表示的虚拟参加者看起来正在该场所处参加事件。
[0022]在具有前述段本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种在事件期间在场所处招待虚拟观众的方法，所述方法包括：分发将由位于远离所述场所的多个用户设备接收的所述事件的可观察表示；从远离所述场所的多个虚拟参加者中的每一个接收媒体流，每个所接收的媒体流包括所述多个虚拟参加者中的至少一个的视觉表示；以及在所述场所处的显示器上显示所述虚拟参加者中的至少一些的视觉表示，使得所述虚拟参加者看起来正在所述场所参加所述事件。2.根据权利要求1所述的方法，其中，所接收的媒体流包括表示由所述虚拟参加者发出的表示声音的音频，并且所述方法包括在所述场所内再现所述声音，使得所述虚拟参加者发出的所述声音在所述场所是可听见的。3.根据权利要求1所述的方法，包括确定对应于每个所接收的媒体流的场景信息，以及选择所述虚拟参加者中的至少一些用于基于所述场景信息进行显示。4.根据权利要求3所述的方法，包括使用面部识别或语音识别中的至少一个来识别每个所接收的媒体流中的至少一个个体，将所述面部识别或语音识别的结果包括在所述场景信息中，以及基于所述面部识别或语音识别的所包括的结果来选择所述虚拟参加者中的至少一些。5.根据权利要求4所述的方法，包括基于所述面部识别或语音识别的结果来选择所述场所内被识别的个体的视觉表示的位置。6.根据权利要求5所述的方法，包括基于所述面部识别或语音识别的结果对所述场所内的所述多个虚拟参加者中的一些的视觉表示进行分组。7.根据权利要求4所述的方法，包括确定包括被识别的个体的所述媒体流的至少一个其他特征，以及基于所述至少一个其他特征选择在所述场所内被识别的个体的视觉表示的位置。8.根据权利要求7所述的方法，包括基于所确定的所述多个虚拟参加者中的一些的相应媒体流的至少一个其他特征之间的相似性，对所述场所内的所述多个虚拟参加者中的一些的视觉表示进行分组。9.根据权利要求3所述的方法，其中，所述场景信息包括关于所接收的媒体流中的相对应的一个的用户简档数据，并且所述方法包括基于所述用户简档数据确定所接收的媒体流中的所述相对应的一个的视觉表示是否应该包括在所显示的虚拟参加者当中。10.根据权利要求9所述的方法，包括基于以下中的至少一个在所述事件期间在所述虚拟参加者中的一些之间建立对等联网会话：由所述虚拟参加者中的一个在与所述虚拟参加者中的至少一个其他虚拟参加者进行对等联网会话中所进行的选取或选择，或者指示所述虚拟参加者中的一些之间的关联性的所述多个虚拟参加者中的一些中的每一个的用户简档数据。11.根据权利要求1所述的方法，包括
确定所述虚拟参加者中的至少一个在所述事件期间出现在所述事件的分布式可观察表示中或者出现在所述场所处的专用显示器上，以及在所述事件期间或之后向所述虚拟参加者中的至少一个发送媒体文件，其中，所发送的媒体文件包括所述虚拟参加者中的至少一个的出现。12.根据权利要求1所述的方法，其中，所述显示包括将所述虚拟参加者中的每一个的视觉表示放置在相应的区块中，并且基于所述显示器上的虚拟参加者的数量选择所述区块的大小。13.根据权利要求1所述的方法，包括选择所述虚拟参加者中的至少一个，并且对于所述事件的至少一部分，与所述虚拟参加者的视觉表示中的其他视觉表示不同地显示所述虚拟参加者中的所选择的至少一个的视觉表示。14.根据权利要求13所述的方法，包括促进在所述场所处加入所述事件的个体与所述虚拟参加者中的所选择的至少一个之间的交互，同时与所述虚拟参加者的视觉表示中的其他视觉表示不同地显示所述虚拟参加者中的所选择的至少一个的视觉表示。15.根据权利要求1所...

【专利技术属性】
技术研发人员：亚当，
申请(专利权)人：一五秒誉股份有限公司，
类型：发明
国别省市：