三维视频的传输制造技术

在一个实施方式中，方法包括从客户端装置接收与包括多个视图的三维视频的特定视图对应的请求。方法还包括访问与视频对应的数据流。方法还包括基于请求来选择所访问的数据流的一个或多个部分，所选择的部分中的至少一部分对应于特定视图。方法还包括将所访问的数据流中的、所选择的部分发送到客户端装置。

Three dimensional video transmission

In one embodiment, the method includes receiving a request from a client device corresponding to a particular view of a three-dimensional video including a plurality of views. The method also includes accessing a data stream corresponding to the video. The method also includes selecting one or more portions of the accessed data stream based on the request, at least a portion of the selected portion corresponding to a particular view. The method also includes sending selected portions of the accessed data stream to the client device.

【技术实现步骤摘要】
【国外来华专利技术】
本公开大致涉及三维图像。
技术介绍
人类大脑基于双眼之间的图像差异来感知三维(3-D)图像。通过使用从略微不同的角度获得的相同场景的两个图像，能够以高精确度对距对象的距离进行三角测量。每只眼睛观察由左眼和右眼看到的对象的略微不同的角度。3-D图像的使用允许观看者沉浸在另一环境中，以及在一些情况下允许观看者从不同的有利位置观看例如体育事件或音乐会的事件。一些图像采集系统基于采集立体2-D图像。作为示例，可以使用通过使用成对的空间分隔开的平行摄像机采集的2-D图像来构建3-D图像。作为另一示例，当采集立体图像中的第二个图像时，可以物理地移动单个摄像机以产生空间偏移。在许多情况下，图像采集系统限于在限定的角度内采集3-D图像。3-D显示器通常通过向观看者的左眼和右眼分别呈现两个偏移图像来提供对2-D图像深度的感知。这些2-D图像随后在大脑中进行组合以给出3-D深度的感知。显示“偏移”2-D图像以提供深度感知的其它示例性方法包括在观看者的眼睛上使用色度相反的滤色器(例如，红色和蓝绿色)、不同的偏振或镜头快门。
技术实现思路
技术方案方法，包括：从客户端装置接收与包括多个视图的三维视频的特定视图对应的请求；访问与视频对应的数据流；基于请求，选择所访问的数据流的一个或多个部分，所选择的部分中的至少一个与特定视图对应；以及将所访问的数据流中的、所选择部分发送到客户端装置。附图说明图1示出示例性3-D图像系统结构。图2示出摄像机的示例性立体对。图3示出摄像机系统的示例性摄像机配置的部分平面图。图4示出示例性摄像机系统的平面图。图5示出由摄像机系统的摄像机采集的图像的示例性集合。图6示出示例性摄像机系统的侧视图。图7示出由摄像机系统的摄像机采集的重叠图像的示例性集合。图8示出用于拼接离散图像的示例性方法。图9和图10示出用于拼接离散图像的其它示例性方法。图11示出图像的示例性分割。图12示出图像的示例性特征点匹配。图13示出示例性顶部图像和示例性主拼接图像。图14示出图13的处理之后的示例性顶部图像。图15和图16示出用于拼接离散图像的示例性方法。图17示出包括各种视频数据分量的内容包。图18示出配置成将内容包广播为复合流的内容服务器。图19示出涉及非绑定流的直接传输的示例性传输方案。图20至图22各自示出用于传输视频流的示例性媒体方案。图23示出分片流集合。图24示出用于传输视频流的示例性交互方案。图25示出用于发送3-D360°视频的示例性方法。图26示出基于使用摄影测量的混合拼接的示例性重构过程。图27示出用于重构3-D360°视频的示例性方法。图28示出用于重构3-D360°视频的另一示例性方法。图29示出在将畸变操作应用于图像之前和之后的单目图像的示例性集合。图30至图31示出示例性360°立体3-D环境。图32示出用于与3-D视频交互的示例性方法。图33示出示例性头戴式客户端计算装置的框图。图34示出在佩戴示例性头戴式客户端计算装置的同时站在房间中的用户。图35示出在佩戴头戴式客户端计算装置时由用户观看的示例性场景。图36示出具有示例性通知的图35的示例性场景。图37示出在图35的场景上叠加人的示例性场景。图38示出在图35的场景上叠加狗的示例性场景。图39示出分成两个示例性视图的示例性显示器。图40示出在图35的场景上叠加桌子的示例性场景。图41示出在图35的场景上叠加弯曲箭头的示例性场景。图42示出具有示例性示意地图的图35的示例性场景。图43示出具有示例性俯视图的图35的示例性场景。图44示出示例性计算机系统。实施本专利技术的最佳方式方法，包括：从客户端装置接收与包括多个视图的三维视频的特定视图对应的请求；访问与视频对应的数据流；基于请求，选择所访问的数据流中的一个或多个部分，所选择的部分中的至少一部分与特定视图对应；以及将所访问的数据流中的、所选择的部分发送到客户端装置。所接收的请求包括用于以指定比特率发送所访问的数据流的一个或多个部分或者用于省略所访问的数据流的一个或多个部分的指令。所接收的请求包括用于对所访问的数据流进行转换的指令。转换包括对所访问的数据流进行代码转换或尺寸调整。存储经转换的数据流的结果。对所访问的数据流进行解码；以及从解码的数据流中提取所选数据流的每一部分。所访问的数据流包括多个数据流；以及多个数据流中的每一数据流包括所提取的部分中的特定一部分。视频包括具有多个分辨率的视频流、来自单个摄像机的视频流、处理的视频流或者来自顶部摄像机的视频流。所访问的数据流包括360°立体三维(3-D)视频。所访问的数据流包括与视频时间同步的一个或多个音频流。所访问的数据流包括用于在客户端装置上重构视频的数据。重构数据包括视频的空间滤波数据、畸变数据、校正信息或投影参数。重构数据包括音频空间重构数据。所选择的部分与对应于特定视图的高分辨率视频对应。所选择的部分还包括所访问的数据流中的、与特定视图外部的一个或多个区域的低分辨率视频对应的部分。视频的分辨率与特定视图静止的时间量成比例地增加。推断特定视图中的变化；以及基于所推断的变化来选择所访问数据流中的、与所推断的变化对应的一个或多个部分。发送包括基于检测到的与客户端装置的连接的带宽来调整比特率。从客户端计算装置向服务器计算装置发送对包括多个视图的三维视频的特定视图的请求；从服务器计算装置接收数据流，数据流包括：与三维视频的特定视图对应的多个图像，以及用于组合多个图像以创建三维视频的特定视图的指令；根据指令，通过客户端计算装置组合多个图像；以及通过客户端计算装置呈现三维视频的特定视图。数据流还包括：与三维视频的至少一个其它视图对应的多个图像；以及用于组合与其它视图对应的多个图像以创建三维视频的其它视图的指令；以及通过客户端计算装置来组合多个图像包括：确定与三维视频的特定视图对应的特定多个图像；以及根据针对特定多个图像的指令来组合特定多个图像。三维视频的特定视图是高分辨率视频；以及三维视频的至少一个其它视图是特定视图外部的一个或多个区域的低分辨率视频。请求包括用于以指定比特率发送三维视频的一个或多个部分的指令。包含能够被执行的指令的一个或多个非暂时性计算机可读存储介质，指令在被执行时：从客户端装置接收与包括多个视图的三维视频的特定视图对应的请求；访问与视频对应的数据流；基于请求，选择所访问的数据流中的一个或多个部分，所选择的部分中的至少一部分与特定视图对应；以及将所访问的数据流中的、所选择的部分发送到客户端装置。所接收的请求包括用于以指定比特率发送所访问的数据流的一个或多个部分或者用于省略所访问的数据流的一个或多个部分的指令。所接收的请求包括用于转换所访问的数据流的指令。指令在执行时还可操作来：对所访问的数据流进行解码；以及从解码的数据流中提取所访问的数据流的每一部分。视频包括具有多个分辨率的视频流、来自单个摄像机的视频流、处理的视频流或者来自顶部摄像机的视频流。指令在执行时还可操作来：推断特定视图中的变化；以及基于所推断的变化来选择所访问数据流中的、与所推断的变化对应的一个或多个部分。设备，包括：包含指令的一个或多个非暂时性计算机可读存储介质；以及一个或多个处理器，该一个或多个处理器联接到存储介质并且配置成执行指令以：从客户端装置接收与包括多本文档来自技高网...

【技术保护点】
方法，包括：从客户端装置接收与包括多个视图的三维视频的特定视图对应的请求；访问与所述视频对应的数据流；基于所述请求，选择所访问的数据流中的一个或多个部分，所选择的部分中的至少一部分与所述特定视图对应；以及将所访问的数据流中的、所选择的部分发送到所述客户端装置。

【技术特征摘要】
【国外来华专利技术】2014.09.22 US 62/053,726;2014.09.22 US 62/053,729;1.方法，包括：从客户端装置接收与包括多个视图的三维视频的特定视图对应的请求；访问与所述视频对应的数据流；基于所述请求，选择所访问的数据流中的一个或多个部分，所选择的部分中的至少一部分与所述特定视图对应；以及将所访问的数据流中的、所选择的部分发送到所述客户端装置。2.如权利要求1所述的方法，其中，所接收的请求包括用于以指定比特率发送所访问的数据流的一个或多个部分或者用于省略所访问的数据流的一个或多个部分的指令。3.如权利要求1所述的方法，其中，所接收的请求包括用于对所访问的数据流进行转换的指令。4.如权利要求1所述的方法，还包括：对所访问的数据流进行解码；以及从所解码的数据流中提取所选择的数据流的每一部分。5.如权利要求4所述的方法，其中：所访问的数据流包括多个数据流；以及所述多个数据流中的每个数据流包括所提取的部分中的特定一部分。6.如权利要求1所述的方法，其中，所述视频包括具有多个分辨率的视频流、来自单个摄像机的视频流、处理的视频流或者来自顶部摄像机的视频流。7.如权利要求1所述的方法，其中，所访问的数据流包括360°立体三维(3-D)视频。8.如权利要求1所述的方法，其中，所访问的数据流包括与所述视频时间同步的一个或多个音频流。9.如权利要求1所述的方法，其中，所访问的数据流包括用于在所述客户端装置上重构所述视频的数据。10.如权利要求9所述的方法，其中，用于重构的数据包括所述视频的空间滤波数据、畸变数据、校正信息或投影参数。11.如权利要求1所述的方法，其中，所选择的部分与对应于所述特定视图的高分辨率视频对应，以及所选择的部分包括所访问的数据流中的、与所述特定视图外部的一个或多个区域的低分辨率视频对应的部分。12.如权利要求1所述的方法，其中，所述视频的分辨率与所述特定视图保持静止的时间量成比例地增加。13.如权利要求1所述的方法，还包括：推断所述特定视图中的变化；以及基于所推断的变化来选择所访问的数据流中的、与所推断的变化对应的一个...

【专利技术属性】
技术研发人员：赛义德·萨迪，塞尔吉奥·普尔迪赛斯冈扎勒兹，拉胡尔·布德海拉亚，李东禹，艾莎·穆达赛尔·赫瓦贾，普拉纳夫·米斯特里，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国;KR