用于处理来自全方位摄像头的数据的系统技术方案

本发明专利技术的一个方面涉及用于处理来自全方位摄像头的数据的系统。一种包括摄像头和计算设备的系统。所述摄像头可以包括(a)多个捕获设备和(b)第一接口，所述多个捕获设备被配置成捕获摄像头周围的环境的图像，以提供球形视野。所述计算设备可以包括(a)处理器和(b)第二接口。摄像头可以被配置成基于捕获的图像编码多个视频流。第一接口可以被配置成把所述多个视频流传送给第二接口。处理器可以对所述多个视频流执行拼接操作，以生成单个视频信号。可以在传送所述多个视频流时，实时对所述多个视频流执行拼接操作。所述单个视频信号可以被配置成表示基于摄像头周围的环境的全方位视图。

【技术实现步骤摘要】
用于处理来自全方位摄像头的数据的系统
本专利技术一般地涉及全方位摄像头，并且更具体地，涉及用于处理来自具有多个处理器和/或连接到各个处理器的多个传感器的全方位摄像头的数据的方法和/或系统。
技术介绍
常规的全方位摄像头(也称为虚拟现实摄像头、球形摄像头、全景摄像头、沉浸式视频摄像头或360摄像头)带来设计挑战。单个镜头不能捕获整个球形视野。全方位摄像头的用途是沿围绕摄像头的所有方向(即，在每个轴上360度地)捕获视频。捕获的视频表示观看该视频的人周围的场景的完整视图。用户通常使用头戴式显示器或者交互式视频播放器来观看正在重放的捕获的视频。在重放期间，可以沿任意方向改变视频取向。以前考虑的常规解决方案包括在镜头前方放置凸面镜，以捕获更多的场景。然而，利用在镜头前方的凸面镜只提供360度水平覆盖，而失去球形视野的顶部和底部。以前考虑的常规解决方案还包括把来自多个镜头的图像捕获成多个视频信号。然而，利用多个视频信号产生多个问题，诸如利用单个处理器处理所有视频信号、利用单个处理器产生多个视频文件、为每个视频信号提供专用处理器和管理来自各个处理器的多个视频文件和视频信号的问题。商业产品已经尝试了几种常规途径。大多数常规途径落入几种类别之一。在一种常规途径中，每个镜头安装在连接到专用处理器的传感器上。每个处理器把一个视频文件记录在存储介质上。在记录完成之后，所有文件从存储介质转出到计算机或云。拼接多个文件以创建球形视野仅作为后期制作处理完成。在另一种常规途径中，每个镜头安装在传感器上。系统中的所有传感器连接到单个处理器。所述处理器把多个视频文件记录在存储介质上。在记录完成之后，所有文件从存储介质转出到计算机或云。拼接多个文件以创建球形视野仅作为后期制作处理完成。理想的将是实现一种用于处理来自具有多个处理器和/或连接到各个处理器的多个传感器的全方位摄像头的数据的系统。
技术实现思路
本专利技术涉及一种包括摄像头和计算设备的系统。所述摄像头可以包括(a)多个捕获设备和(b)第一接口，所述多个捕获设备被配置成捕获摄像头周围的环境的图像，以提供球形视野。所述计算设备可以包括(a)处理器和(b)第二接口。摄像头可以被配置成基于捕获的图像来编码多个视频流。第一接口可以被配置成把所述多个视频流传送给第二接口。处理器可以对所述多个视频流执行拼接操作，以生成单个视频信号。可以在传送所述多个视频流时，实时地对所述多个视频流执行拼接操作。所述单个视频信号可以被配置成表示基于摄像头周围的环境的全方位视图。本专利技术还包括一种系统，所述系统包括摄像头，所述摄像头包括(a)多个捕获设备，所述多个捕获设备被配置成捕获摄像头周围的环境的图像，以提供球形视野，和(b)第一接口，以及计算设备，所述计算设备包括(a)处理器和(b)第二接口，其中(i)所述摄像头被配置成基于捕获的图像来编码多个视频流，(ii)第一接口被配置成把所述多个视频流传送给第二接口，(iii)所述处理器被配置成对所述多个视频流执行拼接操作，以生成单个视频信号，(iv)在传送所述多个视频流时，实时对所述多个视频流执行拼接操作，以及(v)所述单个视频信号被配置成表示基于摄像头周围的环境的全方位视图。在上述系统方面的一些实施例中，全方位视图包括单视场视图和立体视图之一。在上述系统方面的一些实施例中，计算设备(i)还包括第三接口，并且(ii)被配置成经由第三接口传送所述单个视频信号。在上述系统方面的一些实施例中，所述设备被配置成通过第三接口实时地把所述单个视频信号传送给(a)远程服务器和(b)用户设备中的至少一个。在上述系统方面的一些实施例中，用户设备是(a)台式计算机、(b)智能电话、(c)平板计算机和(d)头戴式显示器中的至少一个。在上述系统方面的一些实施例中，第三接口被配置成把所述单个视频信号传送给(i)网络设备和(ii)显示器以及(iii)HDMI接口之一。在上述系统方面的一些实施例中，网络设备被配置成把所述单个视频信号传送给最终用户。在上述系统方面的一些实施例中，由摄像头进行的编码、所述多个视频流从第一接口到第二接口的传送以及由计算设备执行的拼接操作是实时进行的。在上述系统方面的一些实施例中，所述摄像头和计算设备在分离的外壳中实现。在上述系统方面的一些实施例中，第一接口和第二接口通过单个电缆连接。在上述系统方面的一些实施例中，所述单个电缆实现(i)以太网供电(PoE)标准和(ii)通用串行总线(USB)标准中的至少一个。在上述系统方面的一些实施例中，由摄像头进行的编码、所述多个视频流从第一接口到第二接口的传送、以及由计算设备执行的拼接操作是实时进行的。在上述系统方面的一些实施例中，计算设备被实现为小型便携式计算机。在上述系统方面的一些实施例中，计算设备被实现为计算服务，所述计算服务被配置成提供可用处理资源以按需缩放。在上述系统方面的一些实施例中，计算设备被配置成把所述单个视频信号传送给内容递送网络，以允许分发给多个最终用户。在上述系统方面的一些实施例中，计算设备被配置成(i)在进行拼接操作之前，解码所述多个视频流，以及(ii)重新编码所述单个视频信号。在上述系统方面的一些实施例中，所述单个视频信号使用投影方法来表示球形视野。在上述系统方面的一些实施例中，(i)所述单个视频信号被传送给内容递送网络，(ii)内容递送网络被配置成把所述单个视频信号转码成多个视频流，(iii)基于至少一个因素把视频流之一表示给一个或多个最终用户，以及(iv)所述因素包括带宽、QoS、订制等级和与服务器的连接的数目中的至少一个。在上述设备方面的一些实施例中，内容递送网络(i)按需向最终用户递送转码视频流中的第一视频流，以及(ii)响应于所述因素中的变化，切换成递送转码视频流中的第二视频流。在上述系统方面的一些实施例中，(i)转码视频流中的第一视频流和转码视频流中的第二视频流中的一个视频流具有比转码视频流中的第一视频流和转码视频流中的第二视频流中的另一个视频流高的质量，并且(ii)所述质量包括(a)分辨率、(b)帧速率、(c)压缩比、(d)压缩方法以及(e)压缩标准中的至少一个。本专利技术还包含涉及一种装置的方面，该装置包括多个图像模块，每个图像模块包括(i)配置成捕获图像的传感器，和(ii)安装到所述传感器的镜头以及多个处理器，每个处理器被配置成(A)从所述多个图像模块的子集接收图像，并且(B)生成多个视频流，其中(i)视频流中的每一个视频流是由处理器之一响应于从图像模块之一接收的图像生成的，(ii)所述多个图像模块的所述子集包括所述多个图像模块中的至少两个不同的图像模块，并且(iii)所述镜头被布置成容许图像提供对于装置周围的场景的球形视野覆盖。在上述装置方面的一些实施例中，接口被配置成(i)把装置连接到外部设备，和(ii)向该装置提供电力。在上述装置方面的一些实施例中，所述接口遵从(i)以太网供电(PoE)标准和(ii)通用串行总线(USB)标准中的至少一个。在上述装置方面的一些实施例中，所述接口被配置成使用单个电缆来(i)传送所述多个视频流，以及(ii)为装置接收电力。在上述装置方面的一些实施例中，通信电路被配置成(i)接收由所述多个处理器打包的所述多个视频流，(ii)把所述多个视频流转发到单个传输中，本文档来自技高网...

【技术保护点】
一种系统，包括：摄像头，所述摄像头包括(a)多个捕获设备和(b)第一接口，其中所述多个捕获设备被配置成捕获所述摄像头周围的环境的图像，以提供球形视野；以及计算设备，所述计算设备包括(a)处理器和(b)第二接口，其中(i)所述摄像头被配置成基于所述捕获的图像编码多个视频流，(ii)所述第一接口被配置成把所述多个视频流传送给所述第二接口，(iii)所述处理器被配置成对所述多个视频流执行拼接操作，以生成单个视频信号，(iv)在传送所述多个视频流时，实时对所述多个视频流执行所述拼接操作，以及(v)所述单个视频信号被配置成表示基于所述摄像头周围的所述环境的全方位视图。

【技术特征摘要】
2015.12.29 US 14/982,236;2015.12.29 US 14/982,1911.一种系统，包括：摄像头，所述摄像头包括(a)多个捕获设备和(b)第一接口，其中所述多个捕获设备被配置成捕获所述摄像头周围的环境的图像，以提供球形视野；以及计算设备，所述计算设备包括(a)处理器和(b)第二接口，其中(i)所述摄像头被配置成基于所述捕获的图像编码多个视频流，(ii)所述第一接口被配置成把所述多个视频流传送给所述第二接口，(iii)所述处理器被配置成对所述多个视频流执行拼接操作，以生成单个视频信号，(iv)在传送所述多个视频流时，实时对所述多个视频流执行所述拼接操作，以及(v)所述单个视频信号被配置成表示基于所述摄像头周围的所述环境的全方位视图。2.按照权利要求1所述的系统，其中所述摄像头进行的所述编码、所述多个视频流从所述第一接口到所述第二接口的所述传送、以及所述计算设备执行的所述拼接操作是实时执行的。3.按照权利要求1所述的系统，其中所述摄像头和所述计算设备在分离的外壳中实现。4.按照权利要求1所述的系统，其中所述计算设备被配置成(i)在执行所述拼接操作之前，解码所述多个视频流，以及(ii)重新编码所述单个视频信号。5.按照权利要求1所述的系统，其中(i)所述单个视频信号被传输给内容递送网络，(ii)所述内容递送网络被配置成把所述单个视频信号转码成多个视频流，(iii)基于至少一个因素，...

【专利技术属性】
技术研发人员：A·芬克，N·波提，G·哈伯，S·华伦特，
申请(专利权)人：影像拼接有限公司，
类型：发明
国别省市：美国,US