用于无线装置中的多视图视频的系统和方法制造方法及图纸

本发明专利技术提供用于经由无线网络提供多视点MV视频数据的系统、方法和设备。举例来说，所述设备可包含处理器，其经配置以确定所述无线网络的用以发射第一MV视频数据的通信信道的至少一第一信道质量估计。所述设备可包含输入/输出I/O控制器，其经配置以接收指示所述第一MV视频数据的渲染的双眼视差错误估计。所述处理器可经配置以至少部分地基于所述第一信道质量估计和/或所述双眼视差错误估计，来确定是否继续进行捕获、编码和/或发射MV视频数据中的至少一者。

System and method for multi view video in a wireless device

The present invention provides a system, method and apparatus for providing multi view MV video data over a wireless network. For example, the device may comprise a processor configured to determine at least one first channel quality estimate of the communication channel of the wireless network for transmitting the first MV video data. The device may include an input / output I/O controller configured to receive a binocular disparity error estimate indicative of the rendering of the first MV video data. The processor may be configured to at least partially based on the estimated channel quality first and / or the binocular parallax error estimation, to determine whether to continue capturing, encoding and / or transmitting at least one video data in MV.

【技术实现步骤摘要】
【国外来华专利技术】用于无线装置中的多视图视频的系统和方法
本专利技术与视频译码和压缩领域有关。明确地说，本专利技术涉及多视图(或多层)视频数据的发射和按比例缩放。
技术介绍
数字视频能力可并入到多种多样的装置中，包含数字电视、数字直播系统、无线广播系统、个人数字助理(PDA)、膝上型或桌上型计算机、平板计算机、电子书阅读器、数码相机、数字记录装置、数字媒体播放器、视频游戏装置、视频游戏控制台、蜂窝式或卫星无线电电话(所谓的“智能电话”)、视频电话会议装置、视频串流装置及其类似者。数字视频装置实施视频译码技术，例如描述于以下各项中的那些技术：由MPEG-2、MPEG-4、ITU-TH.263、ITU-TH.264/MPEG-4第10部分高级视频译码(AVC)定义的标准、高效率视频译码(HEVC)标准，以及此些标准的扩展。视频装置可通过实施这些视频译码技术而更有效率地发射、接收、编码、解码和/或存储数字视频信息。随着“多视图(MV)”视频和“多层”视频(常常可互换指代)，包含三维和/或立体视频，已在消费者视频装置中变得越来越流行，对多视图视频的移动检视和发射的需求已增加。某些技术也已允许经由网络或在对等架构中，将视频从一个装置无线发射到另一装置。可经由无线局域网(WLAN)载波(例如根据IEEE802.11标准中的一或多者)和/或无线广域网(WWAN)载波(例如蜂窝式)，将MV视频从源装置发射到目的地装置。经由WLAN和/或WWAN将此类MV视频从源装置投递到目的地装置可例如取决于相应无线网络载波的服务质量(QoS)。如本文所使用，无线网络可指WLAN、WWAN或类似者。专利技术内容在所附权利要求书的范围内的系统、方法和装置的各种实施方案各自具有若干方面，其中的单个方面并不单独负责本文中所描述的的合乎需要的属性。在不限制所附权利要求书的范围的情况下，本文描述一些显要特征。在附图和以下描述中陈述本说明书中描述的标的物的一或多个实施方案的细节。其它特征、方面和优点将从描述、图式以及所附权利要求书变得显而易见。注意，以下各图的相对尺寸可能未按比例绘制。根据本专利技术的一或多个方面，提供一种用于经由无线网络发射多视图(MV)视频数据的设备/装置。举例来说，所述设备可包含至少一个处理器，其经配置以确定无线网络的用以发射第一MV视频数据的通信信道的至少一第一信道质量估计。所述设备还可包含输入/输出(I/O)控制器，其经配置以接收指示第一MV视频数据的渲染的双眼视差错误估计。所述至少一个处理器可进一步经配置以至少部分地基于第一信道质量估计和/或双眼视差错误估计来确定是否继续进行捕获、编码和/或发射MV视频数据中的至少一者。在相关方面，本专利技术提供一种设备，其例如包含用于确定通信信道的无线网络的用以发射第一MV视频数据的至少一第一信道质量估计的装置。所述设备还可包含用于接收指示第一MV视频数据的渲染的双眼视差错误估计的装置。所述设备可进一步包含用于至少部分地基于第一信道质量估计和/或双眼视差错误估计来确定是否继续进行捕获、编码和/或发射MV视频数据中的至少一者的装置。本专利技术的另一方面提供一种用于经由无线网络发射MV视频数据的方法。举例来说，所述方法可涉及确定无线网络的用以发射第一MV视频数据的通信信道的至少一第一信道质量估计。所述方法还可涉及接收指示第一MV视频数据的渲染的双眼视差错误估计。所述方法可进一步涉及至少部分地基于第一信道质量估计和/或双眼视差错误估计来确定是否继续进行捕获、编码和/或发射MV视频数据中的至少一者。本专利技术的另一方面提供一种非暂时性计算机可读存储媒体，在其上储存有指令，所述指令在被执行时，致使装置的处理器：确定用以发射第一MV视频数据的无线网络通信信道的至少一第一信道质量估计；接收指示第一MV视频数据的渲染的双眼视差错误估计；以及至少部分地基于第一信道质量估计和/或双眼视差错误估计来确定是否继续进行捕获、编码和/或发射MV视频数据中的至少一者。根据本专利技术的一或多个方面，提供一种用于经由无线网络接收MV视频数据的设备/装置。举例来说，所述设备可包含I/O控制器，其经配置以经由无线网络的通信信道接收第一MV视频数据。所述设备可进一步包含至少一个处理器，其经配置以：确定所述通信信道的至少一第一信道质量估计；确定指示第一MV视频数据的渲染的双眼视差错误估计；以及至少部分地基于第一信道质量估计和/或双眼视差错误估计来确定是否继续进行接收、解码和/或渲染MV视频数据中的至少一者。在相关方面中，本专利技术提供一种设备，其例如包含用于经由无线网络的通信信道接收第一MV视频数据的装置。所述设备还可包含：用于确定通信信道的至少一第一信道质量估计的装置；以及用于确定指示第一MV视频数据的渲染的双眼视差错误估计的装置。所述设备可进一步包含用于至少部分地基于第一信道质量估计和/或双眼视差错误估计来确定是否继续进行接收、解码和/或渲染MV视频数据中的至少一者的装置。本专利技术的另一方面提供一种用于经由无线网络接收MV视频数据的方法。举例来说，所述方法可涉及经由无线网络的通信信道接收第一MV视频数据。所述方法还可涉及：确定通信信道的至少一第一信道质量估计；以及确定指示第一MV视频数据的渲染的双眼视差错误估计。所述方法可进一步涉及至少部分地基于第一信道质量估计和/或双眼视差错误估计来确定是否继续进行接收、解码和/或渲染MV视频数据中的至少一者。本专利技术的另一方面提供一种非暂时性计算机可读存储媒体，在其上储存有指令，所述指令在被执行时，致使装置的处理器：经由无线网络的通信信道接收第一MV视频数据；确定所述通信信道的至少一第一信道质量估计；确定指示第一MV视频数据的渲染的双眼视差错误估计；以及至少部分地基于第一信道质量估计和/或双眼视差错误估计来确定是否继续进行接收、解码和/或渲染MV视频数据中的至少一者。附图说明图1示出根据示范性实施例的经由无线网络从视频捕获装置接收多视图(MV)视频数据的移动装置；图2是根据本专利技术的方面的MV视频系统的功能框图；图3A是根据示范性实施例的描绘视频数据在源装置与目的地装置之间的传送的信号流图；图3B是根据示范性实施例的描绘视频数据在源装置与目的地装置之间的传送的另一信号流图；图4是根据示范性实施例的将MV视频发射到目的地装置的视频源的实施例的流程图；图5是根据示范性实施例的描绘发射MV视频数据的方法的流程图；图6说明可由源装置操作的实例方法；以及图7说明可由目的地装置操作的实例方法。具体实施方式经高保真度译码的视频数据在无线网络上的多媒体同步和传送可受带宽、传输距离和/或干扰，以及其它因素限制。在此上下文中，仍需要源装置来确定何时捕获、编码和/或发射多视图(MV)视频数据，相对于捕获、编码和/或发射单视场视频数据。可基于无线网络的用以发射MV视频数据的通信信道的信道质量估计和/或基于来自目的地装置的信息来做出此确定。类似地，仍需要目的地装置来知晓何时接收、解码和/或渲染MV视频数据，相对于单视场视频数据。本文所述的技术通常涉及MV或多层视频译码，例如三维(3D)视频译码、立体视频译码、可缩放视频译码等。举例来说，可用高效视频译码(HEVC)标准或在高效视频译码(HEVC)标准内，以及用其多视图(或多层)扩展(例如对HEVC的本文档来自技高网...

【技术保护点】
一种用于经由无线网络发射视频数据的设备，其包括：至少一个处理器，其经配置以确定所述无线网络的用以发射第一多视点MV视频数据的通信信道的至少一第一信道质量估计；以及输入/输出I/O控制器，其经配置以接收指示所述第一MV视频数据的渲染的双眼视差错误估计；其中所述至少一个处理器进一步经配置以至少部分地基于所述第一信道质量估计和所述双眼视差错误估计，来确定是否继续进行捕获、编码或发射MV视频数据中的至少一者。

【技术特征摘要】
【国外来华专利技术】2015.01.30 US 14/610,6771.一种用于经由无线网络发射视频数据的设备，其包括：至少一个处理器，其经配置以确定所述无线网络的用以发射第一多视点MV视频数据的通信信道的至少一第一信道质量估计；以及输入/输出I/O控制器，其经配置以接收指示所述第一MV视频数据的渲染的双眼视差错误估计；其中所述至少一个处理器进一步经配置以至少部分地基于所述第一信道质量估计和所述双眼视差错误估计，来确定是否继续进行捕获、编码或发射MV视频数据中的至少一者。2.根据权利要求1所述的设备，其中所述至少一个处理器进一步经配置以响应于以下各项中的至少一者：(i)所述第一信道质量估计低于信道质量阈值或(ii)所述双眼视差错误估计满足或超过视差错误阈值，指令所述设备转变到捕获、编码或发射单视场视频数据中的至少一者。3.根据权利要求2所述的设备，其中所述至少一个处理器进一步经配置以响应于所述通信信道的第二信道质量估计满足或超过所述信道质量阈值，指令所述设备转变到捕获、编码或发射第二MV视频数据中的至少一者。4.根据权利要求1所述的设备，其中所述至少一个处理器进一步经配置以响应于以下各项中的至少一者：(i)所述第一信道质量估计满足或超过信道质量阈值或(ii)所述双眼视差错误估计低于视差错误阈值，指令所述设备继续进行捕获、编码或发射MV视频数据中的至少一者。5.根据权利要求1所述的设备，其中所述至少一个处理器进一步经配置以响应于以下各项中的至少一者：(i)所述第一信道质量估计低于信道质量阈值或(ii)所述双眼视差错误估计满足或超过视差错误阈值，指令所述设备发射第一消息来指令目的地装置转变到接收、解码或渲染单视场视频数据中的至少一者。6.根据权利要求5所述的设备，其中所述至少一个处理器进一步经配置以响应于所述通信信道的第二信道质量估计满足或超过所述信道质量阈值，指令所述设备发射第二消息来指令所述目的地装置转变到接收、解码或渲染第二MV视频数据中的至少一者。7.根据权利要求1所述的设备，其中：所述I/O控制器进一步经配置以从目的地装置接收所述通信信道的第二信道质量估计；且所述至少一个处理器进一步经配置以至少部分地基于所述第一信道质量估计、所述第二信道质量估计和所述双眼视差错误估计，来确定是否继续进行捕获、编码或发射MV视频数据中的至少一者。8.一种用于经由无线网络发射视频数据的方法，其包括：确定所述无线网络的用以发射第一多视点MV视频数据的通信信道的至少一第一信道质量估计；接收指示所述第一MV视频数据的渲染的双眼视差错误估计；以及至少部分地基于所述第一信道质量估计和所述双眼视差错误估计，来确定是否继续进行捕获、编码或发射MV视频数据中的至少一者。9.根据权利要求8所述的方法，其进一步包括响应于以下各项中的至少一者：(i)所述第一信道质量估计低于信道质量阈值或(ii)所述双眼视差错误估计满足或超过视差错误阈值，转变到捕获、编码或发射单视场视频数据中的至少一者。10.根据权利要求9所述的方法，其进一步包括响应于所述通信信道的第二信道质量估计满足或超过所述信道质量阈值，转变到捕获、编码或发射第二MV视频数据中的至少一者。11.根据权利要求8所述的方法，其进一步包括响应于以下各项中的至少一者：(i)所述第一信道质量估计满足或超过信道质量阈值或(ii)所述双眼视差错误估计低于视差错误阈值，继续进行捕获、编码或发射MV视频数据中的至少一者。12.根据权利要求8所述的方法，其进一步包括响应于以下各项中的至少一者：(i)所述第一信道质量估计低于信道质量阈值或(ii)所述双眼视差错误估计满足或超过视差错误阈值，发射第一消息来指令目的地装置转变到接收、解码或渲染单视场视频数据中的至少一者。13.根据权利要求12所述的方法，其进一步包括响应于所述通信信道的第二信道质量估计满足或超过所述信道质量阈值，发射第二消息来指令所述目的地装置转变到接收、解码或渲染第二MV视频数据中的至少一者。14.根据权利要求8所述的方法，其进一步包括：从目的地装置接收所述通信信道的第二信道质量估计；以及至少部分地基于所述第一信道质量估计、所述第二信道质量估计和所述双眼视差错误估计，来确定是否继续进行捕获、编码或发射MV视频数据中的至少一者。15.一种用于经由无线网络接收视频数据的设备...

【专利技术属性】
技术研发人员：K·M·拉比，V·N·苏布拉马尼亚姆，F·肖卡特，S·巴拉苏布拉马尼亚姆，
申请(专利权)人：高通股份有限公司，
类型：发明
国别省市：美国,US