用于传输编码媒体数据的方法和设备技术

本发明专利技术涉及一种用于在层模型的基础上传输编码媒体数据的方法，其具有以下步骤：a）将媒体数据划分到基本层和至少一个附加增强层上；b）经由至少两个网络接入传输基本层和至少一个增强层；c）选择具有足以传输基本层的网络质量和/或稳定性的传输基本层的第一网络接入；以及d）取决于第一网络接入的带宽以及网络接入的质量和稳定性，从网络接入之中选择至少一个第二网络接入，以用于传输至少一个增强层。本发明专利技术还涉及一种用于在层模型的基础上传输编码媒体数据的方法，其具有以下步骤：A）经由至少一个网络接入接收被划分到基本层和至少一个附加增强层上的媒体数据；以及B）将因而成功传输的层中的基本层和至少一个扩展层组合到可解码媒体数据中。本发明专利技术还涉及一种用于施行所提到的方法中的一个或全部这二者的设备。

【技术实现步骤摘要】
【专利说明】 用于传输编码媒体数据的方法和设备 本专利技术涉及用于传输编码媒体数据的方法和设备。对于可缩放视频编解码器(SVC)(例如H.264 SVC或H.265 SVC)而言，附加于基本层的层确保了较高视频质量水平并实现了对已经编码的视频流的视频质量的适配。如今，RTCP，作为从(一个或多个)目标节点到(一个或多个)源节点的RTP内的带内反馈信道，承载可从其得到源节点处的实际端到端网络服务质量(例如分组丢失率、延迟、抖动)的信息。基于该信息，编码器能够开始或重新开始源节点处的附加层的生成以用于传输，降低图像频率或帧率，或增加压缩比以降低带宽消耗。为了促进这一点，通过源节点连接与目标节点连接之间的关系来标识端到端链路。该概念还适用于点到多点连接，例如用于视频分发服务。专用于H.264 SVC的另一已知概念是(移动)设备或终端在其上注册其能力(例如屏幕尺寸、分辨率等)的智能路由器。还考虑了朝向设备的可用带宽。视频源生成SVC编解码器的所有层。该视频流经由针对每一个个体目标设备基于注册信息决定将向该设备继续传递多少层的智能路由器而继续传递。因此，针对每一个连接端点转发各个视频流。PPP-多链路描述了例如将多个链路捆绑到链路层中的一个虚拟链路中。这隐藏了关于所使用的接入技术之间的差异的信息，并且，没有关于不同链接质量的输运层的进一步适配是可能的。多路径_TCP允许通过使用子流或部分流来耗尽不同网络路径。然而，针对应用提供了仅一个单个输运服务(即，可靠输运)。本专利技术所解决的一个问题是提供用于传输编码媒体数据的方法、设备和系统的问题，这能够至少部分地克服现有技术的前述缺点。根据本专利技术，该问题由独立权利要求的特征解决。在从属权利要求中提供本专利技术的有利实施例和发展。本专利技术的一个基本思想是:基于当前网络质量来同时利用多于一个网络接入以自动控制SVC层的传输。网络质量可以例如在端到端的基础上(例如，如由RTCP定义的那样)或者局部地在每一个接入技术中加以评估，例如可以利用信号与噪声距离或信噪比(SNR)。因此，根据本专利技术的第一方面，提出了一种用于在层模型的基础上传输编码媒体数据的方法，包括以下步骤:a)将媒体数据划分到基本层和至少一个附加增强层上；b)经由至少两个网络接入传输基本层和至少一个增强层；c)选择具有足以传输基本层的网络质量和/或稳定性的传输基本层的第一网络接入点；以及d)取决于第一网络接入点的带宽以及网络接入的质量和稳定性，从网络接入之中选择至少一个第二网络接入点，以传输至少一个增强层。就本专利技术而言，媒体数据特别是但不仅仅是音频数据和/或视频数据和/或文本数据和/或视频文本数据和/或会议数据和/或应用特定数据等。同样包括的是诸如组合式音频/视频数据和/或会议数据和/或演示数据和/或游戏情形数据等之类的多媒体数据，以及特别地诸如电话数据和/或视频电话数据和/或串流数据等之类的实时通信数据。媒体数据优选地包括多层编解码器的视频和/或音频，特别是根据H.264 SVC的视频编解码器。就本专利技术而言，基本层和增强层是内容承载子层，其中基本层至少包含解码所要求的数据，并且其中一个或多个增强层包含用于解码源介质的质量特征的数据。就本专利技术而言，网络接入可以是任何数据传输路径且还可以包括网络接入点、节点、协议、接口、层等。基本层可以具有在具有最佳网络质量和/或稳定性的网络接入的分配方面的优先级。在该情况中，可以将具有比被分配给增强层的网络接入更好的网络质量和/或稳定性的网络接入分配给基本层。要理解的是，步骤c)和d)可以在步骤b)之前实施。步骤c)和d)还可以在第二网络接入被省略或经历干扰时或者在更好的网络接入可用的情况下被重复地实施。可以为此目的连续监视网络环境。应当理解的是，经由至少一个第二网络接入传输至少一个增强层。这还可以意味着:取决于相应网络接入的要求和能力，划分成多个第二网络接入而传输单个增强层，经由单个第二网络接入传输一个或多个增强层，或者经由多个第二网络接入传输若干增强层。在本专利技术的该方面的一个优选实施例中，该方法考虑针对编解码器的部分层的优先级的编解码器特定参数化。在本专利技术的该方面的一个优选实施例中，该方法具有附加步骤:e)确定可用网络接入点的信噪比；以及f)通过包括所确定的信噪比的度量来近似可用网络接入点的网络质量。信噪比(SNR)被定义为信号水平与噪声水平之比。步骤e)和f)可以被整合到步骤c)和/或d)中。在本专利技术的该方面的一个优选实施例中，该方法具有附加步骤:g)在传输片段之前，在编码媒体数据的每一个片段前添加序列号。由于根据本专利技术，多个网络接入(S卩，传输路径)被用于传输还可具有不同等待时间等的使用数据，因此添加序列号也可以使接收器侧处的组装更容易。本专利技术的另一方面涉及一种用于在层模型的基础上传输编码媒体数据的方法，其具有以下步骤:A)经由至少一个网络接入接收被划分到基本层和至少一个附加增强层上的媒体数据；以及B)将因而成功传输的层中的基本层和至少一个增强层组合到可解码媒体数据中。显然，该方面中的方法涉及接收器侧，而前一方面涉及发射器侧。因此，该方面中的传输方法不需要具有但也可以具有用于传输的步骤。因此，该方面的传输方法还可以一般地理解为用于处理编码媒体数据的方法。根据该专利技术方面中的方法而接收的数据优选地为已借助于根据之前的专利技术方面的方法而提供的数据。通过组合它们，可解码数据至少接收基本层(否则解码将不会是可能的)，并取决于传输成功，接收一个或多个增强层。在本专利技术的该方面的一个优选实施例中，该方法具有附加步骤:C)缓冲媒体数据的所接收到的数据片段，以及D)以正确的顺序组合所接收到且经缓冲的数据片段，优选地基于每个数据片段前的序列号。根据前述专利技术方面的方法优选地提供至少一个增强层以实现以下特征中的一个或多个:-相比于基本层较大的传输错误冗余，-相比于基本层较大的视频分辨率，-至少3维视频分辨率，-相比于基本层较高的图像重复率，-相比于基本层较好的音频接收质量，-多信道、特别是立体声、环绕或空间音频接收质量。较高图像重复率还包括下述情况:其中，当基本层仅具有静止图像或化身(avatar )时，移动图像可以经由增强层而传输。本专利技术的另一方面涉及一种用于施行根据前述专利技术方面之一的方法的设备。具体地，该设备是或者包括服务器(130)和/或移动终端(110)。要理解的是，该方法或该方法的各个段由被实现在该设备中的功能单元控制。功能单元可以被实现在一个单个设备上，或者它们可以以任何期望的方式分布到若干设备。如果涉及第一专利技术方面的方法的功能单元被实现在发射器侧上，并且如果涉及第二专利技术方面的方法的功能单元被实现在接收器侧上，则这是有用的。然而，第一专利技术方面的方法的至少部分可以被实现在接收器侧上和/或第二专利技术方面的方法的至少部分可以被实现在发射器侧上。还应当注意的是，诸如路由器、网关、切换交换局和中心等之类的传输路径上的项可以表示发射器和接收器这两侧。这样的项还可以实现本专利技术的这两个方面，并且情况还可以是:一个这样的项根据经由相应传输路径而传输的层处置数据片段的仅一部分。换言之，根据本专利技术的设备包括覆盖根据本专利技术的方法的仅一个方面的各个单元，以及覆盖这两个方面的部分或整体的各个单元，以及其当前第1页1本文档来自技高网...

【技术保护点】
用于在层模型的基础上传输编码媒体数据的方法，包括以下步骤：a）将媒体数据划分到基本层和至少一个附加增强层上；b）经由至少两个网络接入传输基本层和至少一个增强层；c）选择具有足以传输基本层的网络质量和/或稳定性的传输基本层的第一网络接入；以及d）取决于第一网络接入的带宽以及网络接入的质量和稳定性，从网络接入之中选择至少一个第二网络接入，以用于传输至少一个增强层。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：L布德齐什，M德林，A沃利什，P特兰贾，T齐纳，S格贝特，F莱里德，M齐特巴特，D马丁，
申请(专利权)人：统一有限责任两合公司，
类型：发明
国别省市：德国;DE