全息影像视频会议系统技术方案

本实用新型专利技术提供了全息影像视频会议系统，包括远程全息参与端、本地现场参与端和信令服务器，其中，远程全息参与端包括视频捕捉设备和推流服务器；视频捕捉设备，用于采集远程会议用户的视频信息，并将视频信息发送给推流服务器；推流服务器，用于通过信令服务器建立远程全息参与端和本地现场参与端的点对点连接，并直接把音视频流推送至本地现场参与端；信令服务器，用于打通点对点连接通道，并在无法建立点对点连接时通过额外的中继服务器进行音视频流的转发；本地现场参与端对视频流进行处理以实现全息影像展示。本实用新型专利技术利用全息影像技术和实时音视频传输技术，具有低延迟、低成本、可扩展等优点，可为用户带来沉浸式的远程视频会议体验。

【技术实现步骤摘要】
全息影像视频会议系统
本技术涉及视频会议
，尤其是涉及一种全息影像视频会议系统。
技术介绍
随着商务事业的迅速发展，人们常常无法在同一地点参与会议，因此出现了电话会议、视频会议等远程会议方式。现有的视频会议系统通常只能在2D屏幕上呈现参与者的视频，应用较为死板，与会者之间的交流互通以及参与感体验均较差。于是，市场上出现了利用全息影像技术的远程会议方式，现场与会者可以看到远程与会者的三维立体图像，更为生动逼真。现有全息影像捕捉系统通常使用深度摄像头的3D捕捉点云数据，并在后台服务器处理后生成3维全息影像。通过对现有技术的了解不难发现，现有的视频会议系统无法呈现与会者的全息视频，无法给参与者带来沉浸感和高科技感，注意力不集中，与远程参与者沟通效率较低。而现有的全息影像捕捉系统使用深度摄像头捕捉的点云数据所产生的数据量非常大，需要后台服务进行处理之后才能够呈现，无法进行跨互联网实时传输，并在的实时会议系统中使用。综上所述，目前现有技术中缺少给远程会议带来真实参与感、沉浸感，且能够做到低延迟实时传输的视频会议系统。
技术实现思路
有鉴于此，本技术的目的在于提供全息影像视频会议系统，利用全息影像技术为与会者带来沉浸感体验，涵盖低延迟、低成本、易实现、可扩展等优点，可以更好地服务于远程视频会议。第一方面，本技术实施例提供了全息影像视频会议系统，包括：远程全息参与端、本地现场参与端和信令服务器，其中，所述远程全息参与端包括视频捕捉设备和推流服务器；所述视频捕捉设备，与所述推流服务器相连接，用于采集远程会议用户的音视频信息，并将所述音视频信息发送给所述推流服务器；所述推流服务器，与所述信令服务器相连接，用于形成音视频流，通过所述信令服务器，建立所述远程全息参与端和所述本地现场参与端的点对点连接，并直接把所述音视频流推送至所述本地现场参与端；所述信令服务器，与所述本地现场参与端相连接，用于打通所述点对点连接通道，并在无法建立所述点对点连接时通过额外的中继服务器进行音视频流的转发；所述本地现场参与端，用于对所述音视频流进行处理形成全息影像，并将所述全息影像与真实环境相融合以实现影像与环境的协调代入。结合第一方面，本技术实施例提供了第一方面的第一种可能的实施方式，其中，所述本地现场参与端包括若干个移动终端设备和第三方视角设备，所述移动终端设备包括用于佩戴在现场会议用户头部的全息眼镜，所述第三方视角设备包括移动式手机和投影屏。结合第一方面的第一种可能的实施方式，本技术实施例提供了第一方面的第二种可能的实施方式，其中，所述移动式手机与所述远程全息参与端相连接以完成音频/指令的所述点对点连接。结合第一方面，本技术实施例提供了第一方面的第三种可能的实施方式，其中，所述信令服务器部署在云端或本地。结合第一方面的第一种可能的实施方式，本技术实施例提供了第一方面的第四种可能的实施方式，其中，所述远程全息参与端还包括绿幕，所述远程会议用户处于所述绿幕之前，所述系统利用绿幕实时抠图技术和实时音视频传输技术为所述现场会议用户建立全息影像。结合第一方面的第一种可能的实施方式，本技术实施例提供了第一方面的第五种可能的实施方式，其中，所述全息眼镜包括眼镜支架、镜片和设置于镜片后的摄像头、激光雷达和传感器。结合第一方面的第一种可能的实施方式，本技术实施例提供了第一方面的第六种可能的实施方式，其中，所述移动终端设备包括，但不限于iPhone和iPad。本技术提供了全息影像视频会议系统，包括远程全息参与端、本地现场参与端和信令服务器，其中，远程全息参与端包括视频捕捉设备和推流服务器；视频捕捉设备，用于采集远程会议用户的视频信息，并将视频信息发送给推流服务器；推流服务器，用于通过信令服务器建立远程全息参与端和本地现场参与端的点对点连接，并直接把音视频流推送至本地现场参与端；信令服务器，用于打通点对点连接通道，并在无法建立点对点连接时通过额外的中继服务器进行音视频流的转发；本地现场参与端对视频流进行处理以实现全息影像展示。本技术利用全息影像技术和实时音视频传输技术，具有低延迟、低成本、可扩展等优点，可为用户带来沉浸式的远程视频会议体验。本技术的其他特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本技术而了解。本技术的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。为使本技术的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。附图说明为了更清楚地说明本技术具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本技术的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本技术实施例提供的全息影像视频会议系统示意图。图2为本技术实施例提供的另一全息影像视频会议系统示意图。图标：100-远程全息参与端；110-视频捕捉设备；120-推流服务器；130-绿幕；200-本地现场参与端；210-全息眼镜；220-移动式手机；230-投影屏；300-信令服务器。具体实施方式为使本技术实施例的目的、技术方案和优点更加清楚，下面将结合附图对本技术的技术方案进行清楚、完整地描述，显然，所描述的实施例是本技术一部分实施例，而不是全部的实施例。基于本技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本技术保护的范围。目前，随着商务事业的迅速发展，人们常常无法在同一地点参与会议，因此出现了电话会议、视频会议等远程会议方式。现有的视频会议系统通常只能在2D屏幕上呈现参与者的视频，应用较为死板，与会者之间的交流互通以及参与感体验均较差。于是，市场上出现了利用全息影像技术的远程会议方式，现场与会者可以看到远程与会者的三维立体图像，更为生动逼真。现有全息影像捕捉系统通常使用深度摄像头的3D捕捉点云数据，并在后台服务器处理后生成3维全息影像。通过对现有技术的了解不难发现，现有的视频会议系统无法呈现与会者的全息视频，无法给参与者带来沉浸感和高科技感，注意力不集中，与远程参与者沟通效率较低。而现有的全息影像捕捉系统使用深度摄像头捕捉的点云数据所产生的数据量非常大，需要后台服务进行处理之后才能够呈现，无法进行跨互联网实时传输，并在的实时会议系统中使用。综上所述，目前现有技术中缺少给远程会议带来真实参与感、沉浸感，且能够做到低延迟实时传输的视频会议系统。基于此，本技术实施例提供的全息影像视频会议系统，利用全息影像技术为与会者带来沉浸感体验，涵盖低延迟、低成本、易实现、可扩展等优点，可以更好地服务于远程视频会议。实施例本文档来自技高网...

【技术保护点】
1.全息影像视频会议系统，其特征在于，包括：远程全息参与端、本地现场参与端和信令服务器，其中，所述远程全息参与端包括视频捕捉设备和推流服务器；/n所述视频捕捉设备，与所述推流服务器相连接，用于采集远程会议用户的音视频信息，并将所述音视频信息发送给所述推流服务器；/n所述推流服务器，与所述信令服务器相连接，用于形成音视频流，通过所述信令服务器，建立所述远程全息参与端和所述本地现场参与端的点对点连接，并直接把所述音视频流推送至所述本地现场参与端；/n所述信令服务器，与所述本地现场参与端相连接，用于打通所述点对点连接通道，并在无法建立所述点对点连接时通过额外的中继服务器进行音视频流的转发；/n所述本地现场参与端，用于对所述音视频流进行处理得到全息影像，将所述全息影像与真实环境相融合以实现影像与环境的协调代入。/n

【技术特征摘要】
1.全息影像视频会议系统，其特征在于，包括：远程全息参与端、本地现场参与端和信令服务器，其中，所述远程全息参与端包括视频捕捉设备和推流服务器；
所述视频捕捉设备，与所述推流服务器相连接，用于采集远程会议用户的音视频信息，并将所述音视频信息发送给所述推流服务器；
所述推流服务器，与所述信令服务器相连接，用于形成音视频流，通过所述信令服务器，建立所述远程全息参与端和所述本地现场参与端的点对点连接，并直接把所述音视频流推送至所述本地现场参与端；
所述信令服务器，与所述本地现场参与端相连接，用于打通所述点对点连接通道，并在无法建立所述点对点连接时通过额外的中继服务器进行音视频流的转发；
所述本地现场参与端，用于对所述音视频流进行处理得到全息影像，将所述全息影像与真实环境相融合以实现影像与环境的协调代入。


2.根据权利要求1所述的全息影像视频会议系统，其特征在于，所述本地现场参与端包括若干个移动终端设备和第三方视角设备，所述移动...

【专利技术属性】
技术研发人员：谢宾，程凌，
申请(专利权)人：上海境腾信息科技有限公司，
类型：新型
国别省市：上海;31