使用跨层优化发送多媒体数据封包的方法和装置制造方法及图纸

根据本发明专利技术，一种用于发送多媒体数据封包的方法包括以下处理：从网络实体接收自底向上网络抽象层(B‑NAL)信息；基于接收到的B‑NAL信息确定媒体数据的质量，并且生成具有确定质量的媒体数据；以及生成用于生成的媒体数据的封包，并且发送该封包。

【技术实现步骤摘要】
使用跨层优化发送多媒体数据封包的方法和装置本申请是国际申请日为2012年01月19日、中国申请号为201280014047.2、专利技术名称为“使用跨层优化发送多媒体数据封包的方法和装置”的专利技术专利申请的分案申请。
本专利技术涉及一种用于发送多媒体数据封包的方法和装置，更具体地，涉及一种用于通过跨层优化发送多媒体数据封包的方法和装置。
技术介绍
多媒体服务是指诸如视频通话、例如视频点播(VoD)文件的传输的数据流服务、以及多播和广播服务之类的交互服务。实时多媒体服务可以根据服务类型分类为会话服务、交互服务、以及数据流服务。实时多媒体服务还可以根据参与服务的用户的数目分类为单播、多播和广播服务。为了提供多媒体服务，网络基本上以三种方式保证QoS(服务质量)：BE(尽力而为)、基于每个类的(perclass)QoS、以及基于每个流的(perflow)QoS。对于保证BE服务的QoS没有给出支持。基于每个类的QoS服务在网络中对封包按优先级排序并根据他们的优先级处理封包。即，根据封包的重要性(即，优先级)控制封包的QoS，而不管该封包属于的流。不需要为了支持基于每个类的QoS而在发送器和接收器之间保留资源。仅供参考，优先级可以分类成为损失优先级和延迟优先级。在基于每个流的QoS服务中按照每数据流保留资源。即，为每个流保留资源(例如，比特率和缓冲器状态)或QoS(例如，延迟、损失率等等)。流是指为了提供服务所需要的数据流。例如，为了提供VoD服务所需要的视频数据流、音频数据流、和文本数据流是个体流。在3GPPUMTS(3G)标准以及在IEEE802.16(WiBRO和WIMAX)与LTE标准中支持基于每个类的QoS和基于每个流的QoS。然而，作为更高层的媒体层需要与作为较低层的网络接口连接以便使用QoS方案。通常，RTP(实时传输协议)与RTCP(实时传输控制协议)被设计以使用在服务终端中积聚的信息来测量网络资源或QoS，而不考虑较低层。在传统的RTP和RTCP中，负责发送的网络部件被保持为黑盒子，并且因此很难精确地识别任何变化。因此，从较低层直接地指向的接口应该被用于精确的QoS控制。在MPEG(运动图像专家组)-2和H.264中，具体地SVC(可缩放视频编码)中，每个视频封包在重要性方面不同。应该识别封包之间的重要性差异以便有效地控制视频服务的QoS。在封包交换情况下为了确定IPv6中的每个封包的重要性，应该从IPv6报头读取五元组(即，接收器地址、发送器地址、接收器中的服务的端口号、发送器中的服务的端口号、以及使用的协议)然后从视频封包的负荷读取表示封包的重要性的报头数据。此方案对每封包花费大量处理时间并且违反协议层的独立性。即，路由器应该能在处理封包过程中只读取封包的IP报头，但是实际上不是。只有当可以容易地确定每个封包的重要性时，路由器才可以主动地执行QoS(服务质量)控制。例如，如果网络状态是弱(poor)，则路由器可以根据每封包重要性首先丢弃不重要的封包。同时，标准化中的可缩放视频编码(SVC)或多视图视频编码(MVC)以H.264/AVC标准为基准。以H.264/AVC的网络抽象层单元(NALU)格式将编码后的数据构造成为位流。图1示出H.264/AVC的视频编码层(VCL)和网络抽象层(NAL)。在H.264/AVC中，在处理视频编码的VCL110与发送并存储编码信息的较低层系统130之间定义NAL120。因此，VCL110与NAL130分离。NAL120以NALU为基础处理从VCL生成的编码数据111以便以诸如H/264/AVC文件格式131、RTP133、和MPEG-2系统135之类的格式将编码数据映射到较低层系统130的位流。NALU被分成VCLNALU121和非VCLNALU123。VCLNALU121是相应于在VCL中生成的编码数据111的NALU，而非VCLNALU123是相应于参数集、SEI等等的NALU。基本上，NALU包括NAL报头和作为由VCL的视频编码产生的数据部分的RBSP(原始字节序列负荷)。图2示出NALU的格式。参照图2，NALU200包括NAL报头210和NALU负荷240。NAL报头210一般地占据1字节到5字节。NAL报头210包括指示NALU的类型的NALU类型信息220和指示包括在NALU负荷(即，优先级、空间层等级、时间层等级、和/或质量层等级的联合)中的压缩的原始数据的层的层识别信息230。NALU类型信息220包括固定位(F)字段221、作为指示NALU是否是参考图像的标志的NRI(nal_ref_idc)字段222、以及指示NALU的类型的NALU类型字段230。层识别信息230包括：指示NALU的优先级的优先级(P)字段231以使得可以识别压缩的原始数据的层、指示NALU的空间层等级的Dependency_id(D)字段232、指示NALU的时间层等级的Temporal_level(T)字段233、和/或指示NALU的质量层等级的Quality_level(Q)字段234。相同的NALU格式用于MVC。然而，在MVC中，NALU类型信息220和指示视图的视图识别信息而不是层识别信息230可以包括在NAL报头中的。根据用于SVC或MVC的上述NALU格式，应该分析NAL报头的层识别信息230或视图识别信息以便识别NALU的层或视图。具体地，层识别信息230是2到4字节长，并且通过分析NAL报头210来确定P、D、T和Q字段231到234的全部的值。为了检测P、D、T和Q字段231到234的值而对整个NAL报头210进行分析会导致在处理器上施加约束并且增加系统开销。此外，NAL报头210包括可以从其确定封包的重要性的信息，诸如P字段231。然而，因为路由器在仅仅读取IP报头之后处理封包，所以不能从NALU报头读取重要性识别信息。据此，存在对在IP报头中包括重要性识别信息的需要，以使得路由器可以读取重要性识别信息。
技术实现思路
技术问题为了解决传统问题而提出的本专利技术的目的在于提供一种用于根据媒体数据、网络状态和用户的要求自适应地提供多媒体服务的方法和装置。本专利技术的另一目的是提供一种用于与应用层和较低层网络实体交换信息的综合网络抽象层(NAL)。本专利技术的另一目的是提供一种用于根据媒体数据状态、网络状态、和用户要求状态来提取状态并且在实体之间发送和接收关于提取的状态的信息以便提供多媒体服务的方法和装置。技术方案在本专利技术的一方面中，一种用于发送多媒体数据封包的方法，包括：从网络实体接收自底向上网络抽象层(B-NAL)信息；基于接收到的B-NAL信息确定媒体数据质量，并且生成具有确定质量的媒体数据；以及生成用于生成的媒体数据的封包，并且发送该封包。在本专利技术的另一方面中，一种用于发送多媒体数据封包的装置包括：寄存器，用于从网络实体接收自底向上网络抽象层(B-NAL)信息；媒体数据生成器，用于基于接收到的B-NAL信息确定媒体数据质量，并且生成具有确定质量的媒体数据；以及封包生成器，用于生成封包，该封包用于生成的媒体数据，并且发送该封包。在本专利技术的另一方面中，一种发送多媒体数据的方法，所述方法包括：由底层测量网络状态信息；从底层通过层接口向应用层提供网络状本文档来自技高网...

【技术保护点】
1.一种发送多媒体数据的方法，所述方法包括：由底层测量网络状态信息；从底层通过层接口向应用层提供网络状态信息作为自底向上信息，所述底层和应用层被包括在发送实体中以控制服务质量(QoS)；从应用层通过层接口向底层提供数据质量信息作为自顶向下信息；由发送实体生成包括多媒体数据和数据质量信息的封包；以及由发送实体发送所生成的封包。

【技术特征摘要】
2011.01.19 KR 10-2011-00052621.一种发送多媒体数据的方法，所述方法包括：由底层测量网络状态信息；从底层通过层接口向应用层提供网络状态信息作为自底向上信息，所述底层和应用层被包括在发送实体中以控制服务质量(QoS)；从应用层通过层接口向底层提供数据质量信息作为自顶向下信息；由发送实体生成包括多媒体数据和数据质量信息的封包；以及由发送实体发送所生成的封包。2.如权利要求1所述的方法，其中B-NAL信息还包括由终端请求的服务质量信息和控制信息中的至少一个。3.如权利要求1所述的方法，其中所生成的封包的报头包括关于媒体数据的标记信息，以及其中所述标记信息用于确定发送的封包的资源保留状态。4.一种用于发送多媒体数据的装置，所述方法包括：寄存器，被配置为存储网络状态信息；媒体数据提供器，被配置为提供多媒体数据；跨层优化(CLO)单元，被配置为在底层与应用层之间接口，其中所述底层和应用层被包括在发送实体中以控制服务质量(QoS)；以及封包生成器，被配置为生成包括多媒体数据和数据质量信息的封包并发送所生成的封包，其中CLO单元被配置为：从底层通过层接口向应用层提供网络状态信息作为自底向上信息，从应用层通过层接口向底层提供数据质量信息作为自顶向下信息。5.如权利要求4所述的装置，其中B-NAL信息还包括由终端请求的服务质量信息和控制信息中的至少一个。6.如权利要求4所述的装置，其中所生成的封包的报头...

【专利技术属性】
技术研发人员：黄承吾，朴勍模，宋在涓，徐德荣，权容逸，
申请(专利权)人：三星电子株式会社，庆熙大学校产学协力团，
类型：发明
国别省市：韩国,KR