减小用户头戴式耳机的球形视频带宽的方法和设备技术

一种方法包括：确定与三维(3D)视频相关联的至少一个优选观看视角；以第一质量对3D视频的与所述至少一个优选观看视角对应的第一部分进行编码；以及以第二质量对3D视频的第二部分进行编码，与第二质量相比，第一质量是较高的质量。

【技术实现步骤摘要】
【国外来华专利技术】减小用户头戴式耳机的球形视频带宽的方法和设备相关申请的交叉引用本申请要求2015年5月27日提交的标题为“减小用户头戴式耳机的球形视频带宽的方法和设备”的美国专利申请序列号62/167,121的权益，该美国专利申请以引用的方式全部并入本文。
实施例涉及流式球形视频。
技术介绍
流式球形视频(或者其它三维视频)可以消耗大量的系统资源。例如，编码后的球形视频可以包括大量要传输的位，该大量的位可以消耗大量的带宽以及与编码器和解码器相关联的处理和存储器。
技术实现思路
示例实施例描述了优化流视频、流式3D视频和/或流式球形视频的系统和方法。在普遍方面中，一种方法，其包括：确定与三维(3D)视频相关联的至少一个优选观看视角；以第一质量对3D视频的与至少一个优选观看视角对应的第一部分进行编码；以及以第二质量对3D视频的第二部分进行编码，与第二质量相比，第一质量是较高的质量。在另一普遍方面中，一种服务器和/或串流服务器，其包括：控制器，该控制器配置为确定与三维(3D)视频相关联的至少一个优选观看视角；以及编码器，该编码器配置为以第一质量对3D视频的与至少一个优选观看视角对应的第一部分进行编码，以及以第二质量对3D视频的第二部分进行编码，与第二质量相比，第一质量是较高的质量。在又一普遍方面中，一种方法，其包括：接收对流视频的请求，该请求包括对与三维(3D)视频相关联的用户观看视角的指示；确定用户观看视角是否存储在观看视角数据存储中；在确定出用户观看视角被存储在观看视角数据存储中时，对与用户观看视角相关联的排名值进行增量；以及在确定出用户观看视角未被存储在观看视角数据存储中时，将用户观看视角添加至观看视角数据存储，并且将与用户观看视角相关联的排名值设定为一(1)。实施方式可以包括以下特征中的一个或者多个：例如，该方法(或者服务器上的实施方式)可以进一步包括：将3D视频的第一部分存储在数据存储中；将3D视频的第二部分存储在数据存储中；接收对流视频的请求；以及从数据存储将3D视频的第一部分和3D视频的第二部分串流作为流视频。该方法(或者服务器上的实施方式)可以进一步包括：接收对流视频的请求，该请求包括对用户观看视角的指示；选择与用户观看视角对应的3D视频作为3D视频的编码后的第一部分；以及将3D视频的所选择的第一部分和3D视频的第二部分串流作为流视频。该方法(或者服务器上的实施方式)可以进一步包括：接收对流视频的请求，该请求包括对与3D视频相关联的用户观看视角的指示；确定用户观看视角是否存储在观看视角数据存储中；在确定出用户观看视角被存储在观看视角数据存储中时，对与用户观看视角相关联的计数器进行增量；以及在确定出用户观看视角未被存储在观看视角数据存储中时，将用户观看视角添加至观看视角数据存储，并且将与用户观看视角相关联的计数器设定为一(1)。该方法(或者服务器上的实施方式)可以进一步包括：对3D视频的第二部分进行编码包括：在第一通路编码操作中使用至少一个第一服务质量QoS参数，以及对3D视频的第一部分进行编码包括：在第二通路编码操作中使用至少一个第二服务质量QoS参数。例如，该确定与3D视频相关联的至少一个优选观看视角基于历史上观看的参考点和历史上观看的观看视角中的至少一个。与3D视频相关联的至少一个优选观看视角基于3D视频的观看者的方位、3D视频的观看者的位置、3D视频的观看者的点以及3D视频的观看者的焦点中的至少一个。该确定与3D视频相关联的至少一个优选观看视角基于默认观看视角，并且该默认观看视角基于显示装置的用户的特性、与显示装置的用户相关联的分组的特性、导演剪辑以及3D视频的特性中的至少一个。例如，该方法(或者服务器上的实施方式)可以进一步包括：以第一质量对3D视频的第二部分的至少一个部分进行迭代地编码；以及串流3D视频的第二部分的至少一个部分。附图说明将通过下面提供的详细说明和附图更充分地理解示例实施例，其中，用相似的附图标记表示相似的元件，该相似的元件仅仅作为说明而提供，因此不旨在限制示例实施例，并且其中：图1A图示了根据至少一个示例实施例的球的二维(2D)表示。图1B图示了作为2D矩形表示的球的2D表示的展开圆柱形表示。图2至图5图示了根据至少一个示例实施例的用于对流式球形视频进行编码的方法。图6A图示了根据至少一个示例实施例的视频编码器系统。图6B图示了根据至少一个示例实施例的视频解码器系统。图7A图示了根据至少一个示例实施例的视频编码器系统的流程图。图7B图示了根据至少一个示例实施例的视频解码器系统的流程图。图8图示了根据至少一个示例实施例的系统。图9是可以用于实施本文所描述的技术的计算机装置和移动计算机装置的示意性框图。应该注意，这些示意图旨在图示某些示例实施例中利用的方法、结构和/或材料的一般特性并且补充下文提供的书面描述。然而，这些附图并非按比例绘制而成，并且可能不能精确地反映任何给定实施例的精确结构或者性能特征，并且不应解释成限定或者限制由示例实施例包含的特性。例如，为了清楚起见，可以减小或者夸大结构元件的定位。在各种附图中使用的相似或者相同的附图标记旨在表示存在相似或者相同的元件或者特征。具体实施方式虽然示例实施例可以包括各种修改和可替代形式，但是经由附图中的示例示出了其实施例并且将在本文中进行更详细地描述。然而，应该理解，不旨在将示例实施例限于所公开的特定形式，而是相反，示例实施例应涵盖落入权利要求书的范围内的所有修改、等同物和可替代物。贯穿示意图的描述，相似的附图标记指的是相似的元件。示例实施例描述了配置为基于球形视频的(由视频的观看者)优先(例如，导演剪辑、历史观看等)观看的部分来优化视频流、3D视频流、球形视频(和/或其它三维视频)流的系统和方法。例如，导演剪辑可以是由视频的导演或者制作者所选择的观看视角。导演剪辑可以基于导演或者制作者所选择的或者在导演或者制作者录制视频时查看的摄像机(多个摄像机)的视野。球形视频、球形视频和/或球形图像的帧可以具有视角。例如，球形图像可以是地球的图像。内部视角可以是从地球的中心向外看的视野。或者内部视角可以处于望向太空的地球上。外部视角可以是从太空往下看地球的视野。作为另一示例，视角可以基于可视的图像的一部分。换言之，可视视角可以是观看者可以看见的视角。可视视角可以是在观看者前面的球形图像的一部分。例如，当从内部视角观看时，观看者可以躺在地面(例如，地球)上并且望向太空。观看者可以在图像中看到月亮、太阳、或者特定恒星。然而，虽然地面(观看者正躺在其上)包括在球形图像中，但地面在当前可视视角之外。在该示例中，观看者可以转过头，并且地面将包括在外围可视视角内。观看者突然转过头，并且地面将处于可视视角内，而月亮、太阳、或者恒星不在可视视角内。外部视角的可视视角可以是球形图像的未(例如，被图像的另一部分)阻挡的一部分和/或球形图像的尚未在视野之外弯曲的一部分。球形图像的另一部分可以通过使球形图像移动(例如，旋转)和/或通过球形图像的运动而进入外部视角的可视视角。因此，可视视角是球形图像的在球形图像的观看者的可视范围内的一部分。球形图像是不会相对于时间而发生变化的图像。例如，与地球相关的内部视角的球形图像可以在一个位置中示出月亮和恒星。而球形视频(或者本文档来自技高网...

【技术保护点】
一种方法，所述方法包括：确定与三维(3D)视频相关联的至少一个优选观看视角；以第一质量对所述3D视频的与所述至少一个优选观看视角对应的第一部分进行编码；以及以第二质量对所述3D视频的第二部分进行编码，与所述第二质量相比，所述第一质量是较高的质量。

【技术特征摘要】
【国外来华专利技术】2015.05.27 US 62/167,2611.一种方法，所述方法包括：确定与三维(3D)视频相关联的至少一个优选观看视角；以第一质量对所述3D视频的与所述至少一个优选观看视角对应的第一部分进行编码；以及以第二质量对所述3D视频的第二部分进行编码，与所述第二质量相比，所述第一质量是较高的质量。2.根据权利要求1所述的方法，所述方法进一步包括：将所述3D视频的所述第一部分存储在数据存储中；将所述3D视频的所述第二部分存储在所述数据存储中；接收对流视频的请求；以及从所述数据存储将所述3D视频的所述第一部分和所述3D视频的所述第二部分串流作为所述流视频。3.根据权利要求1所述的方法，所述方法进一步包括：接收对流视频的请求，所述请求包括对用户观看视角的指示；选择与所述用户观看视角对应的3D视频作为所述3D视频的编码后的所述第一部分；以及将所述3D视频的所选择的所述第一部分与所述3D视频的所述第二部分串流作为所述流视频。4.根据权利要求1所述的方法，所述方法进一步包括：接收对流视频的请求，所述请求包括对与所述3D视频相关联的用户观看视角的指示；确定所述用户观看视角是否被存储在观看视角数据存储中；在确定出所述用户观看视角被存储在所述观看视角数据存储中时，对与所述用户观看视角相关联的计数器进行增量；以及在确定出所述用户观看视角未被存储在所述观看视角数据存储中时，将所述用户观看视角添加至所述观看视角数据存储，并且将与所述用户观看视角相关联的所述计数器设定为一(1)。5.根据权利要求1所述的方法，其中：对所述3D视频的所述第二部分进行编码包括在第一通路编码操作中使用至少一个第一服务质量QoS参数，并且对所述3D视频的所述第一部分进行编码包括在第二通路编码操作中使用至少一个第二服务质量QoS参数。6.根据权利要求1所述的方法，其中所述确定与所述3D视频相关联的所述至少一个优选观看视角基于历史上观看的参考点和历史上观看的观看视角中的至少一个。7.根据权利要求1所述的方法，其中与所述3D视频相关联的所述至少一个优选观看视角基于所述3D视频的观看者的方位、所述3D视频的观看者的位置、所述3D视频的观看者的点以及所述3D视频的观看者的焦点中的至少一个。8.根据权利要求1所述的方法，其中：所述确定与所述3D视频相关联的所述至少一个优选观看视角基于默认观看视角，并且所述默认观看视角基于以下中的至少一个：显示装置的用户的特性；与所述显示装置的所述用户相关联的分组的特性；导演剪辑；以及所述3D视频的特性。9.根据权利要求1所述的方法，所述方法进一步包括：以所述第一质量对所述3D视频的所述第二部分的至少一个部分进行迭代地编码；以及串流所述3D视频的所述第二部分的所述至少一个部分。10.一种串流服务器，所述串流服务器包括：控制器，所述控制器被配置为确定与三维(3D)视频相关联的至少一个优选观看视角；以及编码器，所述编码器被配置为：以第一质量对所述3D视频的与所述至少一个优选观看视角对应的第一部分进行编码，并且以第二质量对所述3D视频的第二部分进行编码，与所述第二质量相比，所述第一质量是较高的质量。11.根据权利要求10所述的串流服务器，其中所述控制器被进一步配置为使：将所述3D视频的所述第一部分存储在数...

【专利技术属性】
技术研发人员：乔舒亚·韦弗，诺姆·杰芬，侯赛因·本贾利，赖利·亚当斯，
申请(专利权)人：谷歌公司，
类型：发明
国别省市：美国,US