用于显示参与通信会话的用户的系统和方法技术方案

本公开涉及用于显示参与通信会话的用户的系统和方法。本公开的系统和方法包括：利用第一用户设备的处理器从第一相机接收第一图像，利用所述处理器从网络位置接收第一实况视频流，利用所述处理器通过将从网络位置接收的第一实况视频流的一部分叠加到从第一相机接收的第一图像上来实时生成实况图像，以及利用所述处理器显示所生成的实况图像。所述处理器显示所生成的实况图像。所述处理器显示所生成的实况图像。

【技术实现步骤摘要】
用于显示参与通信会话的用户的系统和方法


[0001]本公开总体涉及通信应用，更具体地，涉及以沉浸式和用户友好的方式在通信会话中呈现用户。

技术介绍

[0002]随着诸如智能电话、平板电脑、计算机等电子用户设备变得越来越普遍，人们之间的通信越来越多地经由诸如FaceTime、Skype、Zoom、GoToMeeting等远程语音和视频通信应用来进行。世界各地越来越多的用户正在采用远程工作文化。为了有效地协作，用户使用许多语音/视频会议解决方案。除了简单的一对一通信会话外，语音和视频通信还经常在大量的人之间进行。例如，商务会议常常在不要求与会者亲自到场的情况下进行。
[0003]互联网上的语音和视频通信使实时对话成为可能。一个通信会话可以在多个参与者之间进行。每个参与者可以具有他或她自己的相机和/或麦克风，从而被其他参与者看到并与其他参与者交谈。在许多当代视频和/或音频通信应用中，参与者的数量没有限制，每个参与者都可以随时发言。
[0004]今天，用户可以在多种通信系统之间进行选择，这些通信系统能够连接人们，并帮助那些不能或不允许亲身面对他人的人。例如，由于诸如Covid
‑
19(新冠肺炎)之类的流行病引发隔离限制，探望或会见隔离的人(诸如患者或亲属)可能具有挑战性。
[0005]虽然参与者在通信会话期间远程交谈和看到对方的能力为高效通信提供了巨大的潜力，但是通信会话的远程性带来了一些负面因素。用户常常会远程参加商务会议或技术讨论会议，或者在无法亲身面对对方时与家人交谈和看望家人。当用户远程通信时，用户被迫通过用户界面窗口中的显示器看到对方。每个用户都以他或她的相机记录的样子呈现。
[0006]这样的显示降低了通信会话的参与者的体验质量，因为无法逃脱如下认识：每个用户都在与其他用户相隔一段距离的分开位置，导致打破面对面聊天的沉浸式感觉的分离。这样的分离会极大地限制通信会话的趣味性和有效性。
[0007]当代一些让长距离通信感觉像是近距离面对面访拜访的尝试涉及使用多个相机或LiDAR系统来创建全息图，或者使用化身将每个用户呈现在虚拟世界中。这类系统要么过于复杂，要么无法呈现用户友好且沉浸式的体验。所需要的是一种简单的系统，其不需要超出日常的技术来呈现用户友好且沉浸式的视频通信会话。这样的通信系统应该能够解决传统通信系统的上述问题。
附图说明
[0008]图1是根据本公开的一个或多个实施例的用于实现通信会话的第一例示性系统的框图；
[0009]图2A是根据本公开的一个或多个实施例的用于执行通信会话的用户设备系统的框图；
[0010]图2B是根据本公开的一个或多个实施例的用于执行通信会话的服务器的框图；
[0011]图3是根据本公开的一个或多个实施例的用于执行通信会话的用户设备系统的框图；
[0012]图4A是根据本公开的一个或多个实施例的相机视图的图示；
[0013]图4B是根据本公开的一个或多个实施例的相机视图的图示；
[0014]图4C是根据本公开的一个或多个实施例的用户界面的图示；
[0015]图4D是根据本公开的一个或多个实施例的用户界面的图示；
[0016]图5A是根据本公开的一个或多个实施例的相机视图的图示；
[0017]图5B是根据本公开的一个或多个实施例的相机视图的图示；
[0018]图5C是根据本公开的一个或多个实施例的相机视图的图示；
[0019]图5D是根据本公开的一个或多个实施例的用户界面的图示；
[0020]图6是根据本公开的一个或多个实施例的过程的流程图；
[0021]图7是根据本公开的一个或多个实施例的过程的流程图；
[0022]图8是根据本公开的一个或多个实施例的过程的流程图。
具体实施方式
[0023]本公开的各种实施例和配置解决了关于当代通信应用的上述问题和其他需求。如本文所述，可以在两个或更多个用户之间建立通信会话。参与通信会话的一个或多个用户可以使用包括后置相机的用户设备。后置相机可以用来捕获用户环境的图像，例如实况视频。后置相机拍摄的图像可以用作背景图像，用于在通信会话中显示其他用户的增强现实视图。例如，在用户看来，通信会话中的其他用户被呈现在用户自己的环境中。本文描述的这种系统向参与通信会话的用户提供丰富的体验。
[0024]短语“至少一个”、“一个或多个”、“或”、“和/或”是在操作中既是合取又是析取的开放式表达式。例如，表达“A、B和C中的至少一个”、“A、B或C中的至少一个”、“A、B和C中的一个或多个”、“A、B或C中的一个或多个”、“A、B和/或C”，以及“A、B或C”均意为仅A、仅B、仅C、A和B一起、A和C一起、B和C一起、或A、B和C一起。
[0025]术语“一”或“一个”实体指的是一个或多个该实体。因此，术语“一”(或“一个”)、“一个或多个”和“至少一个”在本文可以互换使用。还应注意的是，术语“包括”、“包含”和“具有”可以互换使用。
[0026]本文使用的术语“自动”及其变体指的是在执行过程或操作时在没有实质性人工输入的情况下完成的任何过程或操作(通常是连续或半连续的)。然而，即使过程或操作的执行使用实质性或非实质性的人工输入，但是如果输入是在过程或操作的执行之前接收的，则该过程或操作也可以是自动的。如果人工输入影响到流程或操作将如何被执行，则认为这种输入是实质性的。同意流程或操作的执行的人工输入不被认为是“实质性的”。
[0027]本公开的各方面可以采取完全硬件实施例、完全软件(包括固件、驻留软件、微代码等)实施例、或结合软件和硬件方面(其在本文都可以一般地称为“电路”、“模块”或“系统”)的实施例的形式。可以利用一个或多个计算机可读介质的任意组合。计算机可读介质可以是计算机可读信号介质或计算机可读存储介质。
[0028]计算机可读存储介质可以是例如但不限于电子、磁、光、电磁、红外或半导体系统、
装置或设备，或前述的任何适当组合。计算机可读存储介质的更具体的示例(非穷举列表)将包括以下各项：具有一条或多条导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或闪存)、光纤、便携式光盘只读存储器(CD
‑
ROM)、光存储设备、磁存储设备或上述设备的任何适当组合。在本文档的语境中，计算机可读存储介质可以是能包含或存储由指令执行系统、装置或设备使用或结合指令执行系统、装置或设备使用的程序的任何有形介质。
[0029]计算机可读信号介质可以包括例如在基带中或作为载波的一部分传播的数据信号，其中含有计算机可读程序代码。这样的传播信号可以采取各种形式中的任何一种，包括但不限于电磁、光学或其任何适当的组合。计算机可读信号介质可以是任何计算机可读介质，该计算机可读介质不是计算机可读存储介质，并且可以传送、传播或传输由指令执行系统、装置或设备使用或与指令执行系统、装置本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种呈现实况视频呼叫的方法，所述方法包括执行如下操作：利用第一用户设备的处理器从第一用户设备的第一相机接收第一实况视频流；利用所述处理器从网络位置接收第二实况视频流；利用所述处理器通过将从所述网络位置接收的第二实况视频流的一部分叠加到从第一相机接收的第一实况视频流上，实时生成实况视频；以及利用所述处理器显示所生成的实况视频。2.如权利要求1所述的方法，其中，第一用户设备包括第二相机，所述方法还包括：利用所述处理器从第二相机接收第三实况视频流，以及利用所述处理器将第三实况视频流发送到所述网络位置。3.如权利要求1所述的方法，还包括：利用所述处理器处理第二实况视频流以检测用户的面部，以及利用所述处理器提取与检测到的所述用户的面部相关联的第二实况视频流的像素。4.如权利要求4所述的方法，其中，第二实况视频流的所述部分包括与检测到的所述用户的面部相关联的所提取的第二实况视频流的像素。5.如权利要求4所述的方法，还包括：将与检测到的所述用户的面部相关联的所提取的第二实况视频流的像素叠加到身体的视觉表示上。6.如权利要求1所述的方法，其中，来自第一相机的第一实况视频流是在与第一用户设备的用户相对于所述第一用户设备的方向相反的方向上拍摄的。7...

【专利技术属性】
技术研发人员：F，
申请(专利权)人：阿瓦亚管理有限合伙公司，
类型：发明
国别省市：