用于流式传输和对话服务的能量感知多媒体自适应制造技术

公开了要提供的技术。在一个示例中，用户设备(UE)可以包括被配置为执行以下操作的计算机电路：从节点接收针对HTTP自适应流的清单文件；针对选定时段期间的多个表示，来识别所述清单文件中的能量表征；在所述选定时段期间选择具有期望的能量表征的表示；以及从所述节点请求在具有所期望的能量表征的所述表示中的区段。

【技术实现步骤摘要】
【国外来华专利技术】用于流式传输和对话服务的能量感知多媒体自适应相关申请本申请要求享有于2012年9月28日递交的美国临时专利申请序列号No.61/707784(代理人卷号为P49082Z)的优先权，故以引用方式将上述美国临时专利申请并入本文。
技术介绍
包括流式传输和对话服务的多媒体服务的增长是向新的移动宽带技术和标准演进的关键驱动力之一。移动设备中对数字视频内容的消费不断增加。日常生活中，有许多视频应用广泛使用于移动设备上。例如，在线视频流式传输包括诸如YouTube和Hulu之类的流行服务。视频录制和视频会议包括诸如Skype和GoogleHangout之类的服务。在2011年，YouTube具有超过1兆的全球浏览。这些浏览中的百分之十是经由移动电话或平板电脑访问的。随着更多的智能电话、平板电脑和其它移动计算设备的购买，它们针对视频录制和视频会议的使用将急剧增加。在这种对于多媒体服务连同对于媒体压缩和无线网络基础设施的高消费者需求的情况下，增强未来的蜂窝和移动宽带系统的多媒体服务能力以及向消费者传递高的体验质量(QoE)是感兴趣的，从而确保使用任何设备和技术在任何时间从任何位置对视频内容和服务的无处不在的访问。附图说明通过结合附图来考虑下面的具体实施方式，本公开内容的特征和优点将变得显而易见，这些附图通过举例的方式一起示出了本公开内容的特征；并且其中：图1根据一个示例示出了媒体呈现描述(MPD)元数据文件配置的框图；图2根据一个示例示出了超文本传输协议(HTTP)流式传输的框图；图3根据一个示例示出了用于基于超文本传输协议(基于HTTP)的视频流式传输的能量表征感知无线接入网络(RAN)架构的框图；图4根据一个示例示出了在分组交换流式传输服务(PSS)服务器与PSS客户端之间用于提供特定于内容的能量/功率表征元数据的通信的示意图；图5根据一个示例示出了在IMS多媒体电话服务(MTSI)发送方用户设备(UE)与MTSI接收方UE之间用于提供特定于内容的能量/功率表征元数据的通信的示意图；图6根据一个示例描绘了可操作用于提供HTTP自适应流式传输的移动设备的计算机电路的功能；图7根据一个示例描绘了可操作用于提供HTTP自适应流式传输的媒体服务器的计算机电路的功能；图8根据一个示例示出了在基于MTSI的对话视频系统上的能量表征感知视频会议应用的框图；图9根据一个示例描绘了可操作用于执行与接收移动设备的对话视频的发送移动设备的计算机电路的功能；图10根据一个示例描绘了可操作用于执行与发送移动设备的对话视频的接收移动设备的计算机电路的功能；图11根据一个示例描绘了可操作用于从发送移动用户设备(UE)终端接收实时传输协议(RTP)自适应流的接收移动UE终端的计算机电路的功能；以及图12根据一个示例示出了一种无线设备(例如，UE)的框图。现在将参照所示出的示例性实施例，并且本文将使用特定的语言来描述它们。然而，将理解的是，并不旨在因此限制本专利技术的范围。具体实施方式在公开和描述本专利技术之前，应当理解，本专利技术不受限于本文所公开的特定结构、过程步骤或者材料，而是扩展到其等效项，如相关领域普通技术人员所应当认识到的。还应当理解的是，本文所使用的术语是仅出于描述特定示例的目的来使用的，并不旨在是限制性的。不同附图中的相同附图标记表示相同的元素。在流程图和过程中所提供的数字是为了清晰地示出步骤和操作，而并不是必然指示特定的次序或者顺序。示例实施例下面提供了技术实施例的初始概述，稍后进一步详细描述了特定的技术实施例。这种初始的概括旨在帮助读者更快速地理解本技术，而不是旨在标识本技术的关键特征或者重要特征，也不是旨在限制所要求保护的主题的范围。移动通信设备可用的功率的量已经相当稳定了多年。对用于更加功率密集型服务(例如视频流式传输和视频会议)的移动通信设备的需求增加了移动通信设备处使用的功率的量。功耗的上升将随着趋向于更高级的视频服务的市场需求而继续。例如，分辨率水平为1024p、2048p、4096p等的高清晰度(HD)视频服务以及三维(3D)视频服务(例如基于运动图像专家组的(MPEG的)多视图编码(MVC)标准的那些)以及更加高级的编解码器(例如基于MPEG的高效率视频编码(HEVC)标准的那些)的使用，众所周知这些会消耗大得多的功率。然而，在电池技术中的可用功率基本保持恒定的情况下，对于增加移动通信设备上提供的服务的功率效率存在放大的需要。视频流式传输和视频会议中使用的编码和解码过程并不必然是基于功率效率来开发的，因为它们长期以来是用于桌面式和固定位置的计算设备上的。在编码、发送、接收和解码过程期间移动通信设备中消耗的功率的量可以是巨大的。因此，需要当在移动通信设备上使用流式传输和会议服务时提升效率。因此，移动视频应用可以被配置为：不仅提供良好的观看体验，而且通过使用强大的编解码器和高清晰度视频来避免过多的能量消耗，尤其是当移动设备在其电池的可用电量不足时。移动设备包括需要功率的多个部分。在这些部分中，视频编解码器和显示子系统(以及它们相关联的存储器)是用于视频处理的两个主要的功耗源。视频解码功耗可以取决于计算机处理单元(CPU)或图形处理单元(GPU)的能力。视频显示功耗可以取决于显示分辨率、显示大小和显示类型。与旧的单色显示器不同，近期的LCD或OLED移动端显示屏会消耗相对大量的功率。此外，用于网络传输(包括无线通信和无线电级处理)的平台组件的功耗也可能是巨大的。媒体播放器、容器格式和流式传输协议的选择(例如，RTSP、渐进式下载、HTTP自适应流式传输等)可以显著影响功耗量。在当今的部署中，媒体流式传输的能量消耗远不是最优的。用于媒体流式传输和对话服务的多媒体的智能自适应可以提供对移动设备的能量/功率效率的重要增强。视频流式传输服务提供商、设备供应商和网络运营商可以通过以下方式来显著影响电池寿命：通过选择最优的视频播放器、编码和容器解决方案；通过使用能量效率最高的业务模式通过无线电来传送内容；以及通过对无线电参数进行相应地优化。在一个示例中，在具有不同质量水平的多个版本的相同视频内容可用的情况下，选择视频剪辑的低质量版本可以提供电池功率的重要节省，这是由于通过无线介质发送的数据量的减少而造成的。例如，所减少的数据不仅可以降低发送或接收的比特的数量，其还可以增加移动设备的功率节省模式的睡眠周期的可用性。此外，视频剪辑的低质量版本中所减少的数据的量可以减少对内容进行解码和渲染所需的处理的量。总而言之，有机会设计用于对在设备、服务、媒体播放器以及视频质量之间显著不同的能量消耗进行优化的新的多媒体自适应技术来。无线多媒体标准已经开发了多个多媒体标准以便使得多媒体能够传送到移动计算设备、从移动计算设备传送、或者在移动计算设备之间传送。例如，在流式传输视频中，第三代合作伙伴计划(3GPP)已经开发了技术规范(TS)26.234(例如，版本11.0.0)，其描述了用于点播或直播内容的单播流式传输的基于实时流式传输协议(RTSP)的分组交换流式传输服务(PSS)。此外，在3GPPTS26.247(例如，版本11.0.0)中描述了基于超文本传输协议(HTTP)的流式传输服务(其包括渐进式下载和HTTP动态自适应流式传输(DASH))。基本文档来自技高网...

【技术保护点】
一种可操作用于提供超文本传输协议(HTTP)自适应流式传输的移动设备，其具有被配置为执行以下操作的计算机电路：从节点接收针对HTTP自适应流的清单文件；针对选定时段期间的多个表示中的每个表示，来识别所述清单文件中的能量表征；在所述选定时段期间选择具有期望的能量表征的表示；以及从所述节点请求在具有所期望的能量表征的所述表示中的区段。

【技术特征摘要】
【国外来华专利技术】2012.09.28 US 61/707,7841.一种可操作用于提供超文本传输协议HTTP自适应流式传输的移动设备，其具有被配置为执行以下操作的计算机电路：从节点接收针对HTTP自适应流的清单文件；针对选定时段期间的多个表示中的每个表示，来识别所述清单文件中的能量表征，所述能量表征表征了所述移动设备解码和显示所述表示所需的能量和/或功率的量；在所述选定时段期间选择具有期望的能量表征的表示；以及从所述节点请求在具有所期望的能量表征的所述表示中的区段。2.根据权利要求1所述的移动设备，其中，所述计算机电路还被配置为：确定所述移动设备用于解码和执行所述HTTP自适应流的功率预算；以及针对所述功率预算，在所述选定时段期间选择具有所期望的能量表征的所述表示。3.根据权利要求1所述的移动设备，其中，针对所述HTTP自适应流的所述能量表征被包括在以下各项中：针对HTTP动态自适应流式传输DASH适应集合的媒体呈现描述；或3GP文件格式中嵌入的元数据。4.根据权利要求1所述的移动设备，其中，所述计算机电路还被配置为：经由所述节点向内容服务器传送针对在所述HTTP自适应流的接收、解码或渲染期间所消耗的功率的能量表征。5.根据权利要求4所述的移动设备，其中，基于向所述内容服务器报告的所述能量表征，所述移动设备从所述内容服务器接收具有不同能量表征的表示。6.根据权利要求1所述的移动设备，其中，所述计算机电路还被配置为：针对所述选定时段期间的多个子表示，来识别所述清单文件中的能量表征；以及从所述节点请求在所述子表示中的至少一个子表示中并具有期望的能量表征的子区段。7.根据权利要求1所述的移动设备，其中，所述计算机电路还被配置为：切换到在所述HTTP自适应流中的、在选定访问点处具有不同能量表征的不同表示，以便改变由所述移动设备用于解码和执行所述HTTP自适应流所消耗的功率的量。8.根据权利要求1所述的移动设备，其中，所述移动设备与被配置为传送所述能量表征信息的元数据管理服务器进行通信。9.一种可操作用于提供超文本传输协议HTTP自适应流式传输的媒体服务器，其具有被配置为执行以下操作的计算机电路：针对HTTP自适应流的多个表示，向移动设备传送在字节范围上的能量表征元数据，所述能量表征元数据表征了所述移动设备解码和显示所述表示所需的能量和/或功率的量；接收针对在从所述多个表示中选择的表示中的、在所述字节范围中的所述HTTP自适应流的区段的请求，其中，所述表示是至少部分地基于所述能量表征元数据来选择的；以及向所述移动设备传送在所述字节范围中的所请求的区段。10.根据权利要求9所述的媒体服务器，其中，所述计算机电路还被配置为：基于包括帧像素直方图、最大帧像素值、块编码类型或去块滤波数量的特定于内容的信息，确定在所述字节范围上的所述能量表征元数据。11.根据权利要求9所述的媒体服务器，其中，所述计算机电路还被配置为：确定在所述字节范围上的区段的最小功率水平和最大功率水平。12.根据权利要求9所述的媒体服务器，其中，所述字节范围是针对时段、适应集合、表示、区段或子区段的。13.根据权利要求9所述的媒体服务器，其中，所述计算机电路还被配置为：提供能量/功率值的向量化集合，以便在所述能量表征元数据中指定每个时段、适应集合、表示、区段或子区段的最小能量水平和最大能量水平。14.根据权利要求9所述的媒体服务器，其中，所述计算机电路还被配置为：向所述移动设备传送针对所述HTTP自适应流的清单文件，其中所述清单文件中的所述能量表征元数据表征了所述移动设备解码和显示所述表示所需的能量和/或功率的量，其中该清单文件是：针对HTTP动态自适应流式传输(DASH)适应集合的媒体呈现描述；或3GP文件格式中嵌入的元数据。15.根据权利要求9所述的媒体服务器，其中，所述计算机电路还被配置为：接收针对在所述字节范围中的所述HTTP自适应流的区段的所述请求，其中，所述区段位于包括所述多个表示的适应集合中，并且至少一个表示包括多个区段。16.根据权利要求9所述的媒体服务器，其中，每个表示在所述字节范围上包含与其它表示相比经不同地编码的相同媒体文件，其中，所述编码包括比特速率、帧速率、分辨率或编解码器类型。17.根据权利要求9所述的媒体服务器，其中，所述计算机电路还被配置为：从所述移动设备接收体验质量QoE报告，所述QoE报告包括与在所述HTTP自适应流的接收、解码或渲染期间在所述移动设备处消耗的功率相关联的功率度量；以及基于在所述QoE报告中接收的所述功率度量，向所述移动设备传送不同的表示。18.根据权利要求9所述的媒体服务器，其中，所述计算机电路还被配置为：接收针对在从所述多个表示中选择的不同表示中的所述字节范围中的所述HTTP自适应流的区段的请求，其中，所述不同表示是至少部分地基于所述移动设备处的能量使用来选择的；以及向所述移动设备传送在所述字节范围中的所请求...

【专利技术属性】
技术研发人员：O·奥伊曼，
申请(专利权)人：英特尔公司，
类型：发明
国别省市：美国;US