在具有包含媒体分组的源块的多个FEC帧的RTP流中，在源块之前插入随机访问点，从而允许媒体解码器在完成FEC解码之后立即对媒体分组进行解码。具体地，媒体分组包含用于基于多媒体广播／多播的流式服务内容的前向纠错(FEC)源块。由于多媒体广播／多播流式服务包括动态交互式多媒体场景内容，其中不同媒体的源RTP分组与FEC RTP分组一起作为分离的RTP流而传输，因此包含随机访问点将促进在FEC解码之后立即渲染动态交互式多媒体场景内容，由此降低调谐延迟。
【技术实现步骤摘要】
用于在多媒体流式传输中组装前向纠错帧的方法和设备相关申请的交叉引用本申请是母案为国际申请日为2007年8月20日、于2009年3月20日进入中国国家阶段的PCT申请第PCT / IB2007 / 002385号、中国国家申请号第200780034939.8号、题为“用于在多媒体流式传输中组装前向纠错帧的方法和设备”的专利申请的分案申请。
本申请总体上涉及用于已编码媒体分组群组的前向纠错帧的组装，更具体地，涉及多媒体流式传输中的前向纠错帧。
技术介绍
多数基于分组的通信网络，特别是没有服务质量保证的互联网协议(IP)网络，受到数量不定的分组丢失或者错误的影响。这些丢失可能源自很多来源，例如路由器或者传输部分过载，或者导致分组删除的分组中的位错误。应当理解，分组丢失是多数分组网络架构中的常见操作要点，而不是网络失败。媒体传输，特别是压缩视频的传输，极大地受到分组丢失的影响。可以在媒体编码过程期间通过多种不同的手段来进一步避免由媒体传输中的错误所导致的在媒体呈现中的恼人赝像。然而，在媒体编码过程期间添加冗余位对于预编码的内容是不可行的，并且这通常比使用前向纠错(FEC)的信道编码中的最优保护机制的效率要低。前向纠错如下进行工作:计算各个待保护的媒体分组中待保护位上的冗余位数目，将这些位添加到FEC分组，并且传输媒体分组和FEC分组二者。在接收机处，可以使用FEC分组来检查媒体分组的完整性，并且重建可能丢失的媒体分组。由此,将媒体分组和保护这些媒体分组的FEC分组称为FEC帧。图1中示出了 FEC帧的例子。如图1所示，媒体GOP流300包括由边界315隔开的媒体G0P310和媒体G0P320。FEC结构500包括由边界515隔开的FEC帧510和FEC帧520。除了媒体分组514之外，FEC帧510还包含FEC分组512和两个填充分组516。同样，FEC帧520除了包含媒体分组524还包含FEC分组。这样，FEC帧510、520 —般比媒体GOP长。因此，FEC帧没有与媒体GOP对准。多数意在误差防护的FEC方案允许选择待保护的媒体分组的数目，并且允许自适应地挑选FEC分组的数目，以选择FEC子系统的延迟约束和保护长度。上文意义中的基于分组的FEC需要接收机与FEC帧结构的同步，以便利用FEC。换言之，在可以开始纠错之前，接收机必须缓存FEC帧的所有媒体和FEC分组。视频编码方案以及日益出现的一些音频编码方案，其例如使用所谓的预测编码技术。这种技术分别根据先前的图像或者音频帧来预测后面的视频图像或者音频帧的内容。下文中，将把视频图像和音频帧统称为“图像”，以便将其与FEC帧区分开。通过使用预测编码技术，压缩方案可能会非常有效，但是随着预测链变得更长，也变得更加容易受到错误的影响。因此，不时地插入所谓的关键图像或者非预测编码视频帧的等价项(此后将二者都称为关键图像)。该技术通过使用非预测编码技术来重新建立预测链的完整性。但是这种情况也不是很罕见:关键图像比预测编码图像大5到20倍。每个已编码图像例如可以对应于一个待保护的媒体分组。遵循MPEG-2可视化的惯例，此后将以关键图像开始、随后是零个或多个非关键图像的图像序列称为图像组(GOP)。在数字电视中，GOP通常包括不超过6个图像。然而，在流式传输应用中，常常将GOP尺寸选择得更大。有些GOP在一个GOP中可以具有数百个图像，以便利用预测编码图像的较好的编码效率。为此，“调谐”到此类序列可能需要若干秒。当FEC帧是大尺寸时(例如，包括数百个分组时)，可以将FEC方案设计得更为高效。类似地，多数媒体编码方案在挑选较大的GOP尺寸时效率提高，因为一个GOP仅包含一个单个关键图像，其在统计上远大于GOP的其他图像。然而，大FEC帧和大GOP尺寸二者都需要与其各自的结构同步。对于FEC帧而言，这意味着在接收时缓存整个FEC帧，以及纠正任何可纠正的错误。对于媒体GOP而言，这意味着解析和丢弃那些没有构成GOP开始(关键帧)的媒体分组。在美国专利申请公开N0.2006 / 0107189A1中记载:为了减小解码端的缓存延迟，FEC帧应当与媒体分组的群组对准。为此，编码器应当能够针对FEC帧中所包含的已编码媒体分组的群组来确定完全符合该FEC帧的已编码媒体分组的下一后续群组的数目，并且选择与针对该FEC帧而如此确定的已编码媒体分组的一个或多个群组相关联的所有已编码媒体分组。为了对准目的，可以通过向某些选定分组添加预定的数据来使选定分组的尺寸相等。图2中示出了已对准的FEC帧和媒体分组群组的例子。如图2所示，媒体GOP流400包括由边界415隔开的媒体G0P410和媒体G0P420。FEC结构600包含由边界615隔开的FEC帧610和FEC帧620。尽管FEC帧610和620还包含FEC分组和媒体分组，但是可以使其与GOP对准。FEC可以应用于富媒体(rich media)内容。富媒体内容通常是指图形上丰富并且包含包括图形、文本、视频和音频的组分(或者多个媒体)并且优选地通过单个接口递送的内容。富媒体随着时间动态地改变，并且可以对用户交互做出响应。对于可视地递送富内容以用于实时传输而言，特别是在3GPP中的多媒体广播/多播服务(MBMS)和分组交换流媒体服务(PSSS)架构中，富媒体内容的流式传输正在变得越发重要。PSS提供了用于3G网络中基于互联网协议(IP)的(特别是通过点对点承载的)流式应用的框架。MBMS流式传输服务促进了 3G移动环境中大众实时内容向多个接收机的资源有效递送。并非使用不同的点对点(PtP)承载将相同的内容递送至不同的移动台，而是使用单个点对多点(PtM)承载将相同的内容递送至给定小区中的不同移动台。流式传输的内容可以包括视频、音频、诸如可伸缩矢量图形(SVG)的XML(可扩展标记语言)内容、时控文本以及其他支持的媒体。内容可以预先记录或者根据实时馈送而生成。SVG允许三种类型的图形对象:矢量图形形状、图像以及文本。可以根据先前渲染(render)的对象来聚合、变换以及组成图形对象。可以将SVG内容布置在群组中，使得可以对每个SVG内容独立于后续递送的群组而被处理和显示。群组也称为场景。直到最近，移动设备的应用是基于文本的，其交互性有限。然而，随着更多的无线设备配备了彩色显示器和更为高级的图形渲染库，消费者将要求来自其所有无线应用的富媒体体验。对于移动终端而言，特别是在MBMS、PSS以及多媒体流式传输(MMS)服务的领域中，实时富媒体内容流式传输服务势在必行。富媒体应用(特别是在Web服务领域中)包括基于XML的内容，诸如:SVGT1.2:用于以XML来描述二维图形的语言。SVG允许三种类型的图形对象:矢量图形形状(例如，包括直线和曲线的路径)、多媒体(例如，光栅图像、视频、音频)以及文本。SVG绘图可以是可交互的(使用DOM事件模型)和动态的。动画可以通过声明(例如，通过在SVG内容中嵌入SVG动画元素)或者经由脚本来定义和触发。通过使用访问SVG微文档对象模型(μ DOM)的补充脚本语言，使得SVG的复杂应用成为可能，其中μ DOM提供对所有元素、属性和性质的完全访问。可以将事件句柄的丰富集指派给任何SVG图形对象。由于本文档来自技高网...
【技术保护点】
一种用于在多媒体流式传输中使用的方法，包括：在多个帧中布置用于动态交互式多媒体场景(DIMS)内容的媒体分组，每个帧至少包括媒体分组的源块以及至少一个前向纠错分组；以及在每个源块的开始处插入用于所述DIMS内容的随机访问点，其中所述随机访问点是可伸缩矢量图形场景。
【技术特征摘要】
2006.08.22 US 11/508,7261.一种用于在多媒体流式传输中使用的方法，包括: 在多个帧中布置用于动态交互式多媒体场景(DMS)内容的媒体分组，每个帧至少包括媒体分组的源块以及至少一个前向纠错分组；以及 在每个源块的开始处插入用于所述DIMS内容的随机访问点，其中所述随机访问点是可伸缩矢量图形场景。2.一种用于流式传输多媒体的服务器，其中用于动态交互式多媒体场景(DIMS)内容的媒体分组被布置在多个帧中，每个帧至少包括媒体分组的源块以及至少一个前向纠错分组，所述服务器包括: 生成模块，用于在每个源块的开始处插入用于所述DMS内容的随机访问点，其中所述随机访问点是可伸缩矢量图形场景。3.—种适于接收多媒体比特流的客户端，所述比特流包括布置在帧中的用于动态交互式多媒体场景(DIMS)内容的已编码媒体分组，每个帧至少包括媒体分组的源块以及至少一个前向纠错分组；其中所述客户端包括前向纠错解码器；以及 至少一个媒体解码器，用于对用于所述DMS内容的已编码媒体分组的所述源块进行解码；以及 其中所述客户端适合于在每个源块的开始处接收用于所述DMS内容的随机访问点，其中所述随机访问点是可伸缩矢量图形场景。4.如权利要求3的客户端，其中所述至少一个媒体解码器适于在所述前向纠错解码完成后立即开始...
【专利技术属性】
技术研发人员：R·维丹泰姆，V·塞特勒，S·奇特图里，
申请(专利权)人：诺基亚公司，
类型：发明
国别省市：芬兰;FI
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。