多媒体直播方法、装置及设备制造方法及图纸

本申请提供一种多媒体直播方法、装置及设备，该方法包括：确定第一直播多媒体中已下载至终端设备、且未播放的多媒体的播放时长；当播放时长小于第一预设时长时，降低第一直播多媒体的播放速率，和/或，下载第一码率对应的多媒体分片，第一码率小于正在下载的多媒体分片的码率；当播放时长大于第二预设时长时，增大第一直播多媒体的播放速率，和/或，下载第二码率对应的多媒体分片，第二码率大于正在下载的多媒体分片的码率，第二预设时长大于或等于第一预设时长。在避免直播多媒体出现卡顿的基础上，降低终端设备的多媒体播放点与直播点之间的时延。

Multimedia live broadcast method, device and equipment

【技术实现步骤摘要】
多媒体直播方法、装置及设备
本申请涉及直播
，尤其涉及一种多媒体直播方法、装置及设备。
技术介绍
目前，在多媒体(例如视频、音频等)直播中，可以采用超文本传输协议(HyperTextTransferProtocol，简称HTTP)自适应传输流技术进行直播。在基于HTTP的直播流媒体(HTTPLiveStreaming，简称HLS)直播系统中，通常包括多媒体录制设备、编码器、服务器和终端设备。多媒体录制设备用于录制多媒体并得到多媒体文件，编码器对多媒体文件进行编码得到多媒体分片，并向服务器发送多媒体分片，服务器向终端设备发送多媒体分片，使得终端设备根据接收到的多媒体分片进行多媒体播放。在现有技术中，为了降低多媒体直播过程中由于网络不稳定等因素造成的卡顿，在终端设备开始直播时，终端设备通常根据HLS协议将直播点(服务器中最新的多媒体分片对应的播放点)之前的倒数第三个多媒体分片确定为起播多媒体分片，并从起播多媒体分片开始多媒体播放，即，终端设备开始直播时，终端设备的多媒体播放点与直播点之间具有时延，该时延为三个多媒体分片的播放时长。然而，由于终端设备开始直播时，终端设备的多媒体播放点与直播点之间已经具有一定的时延，在多媒体播放过程中，在网络不稳定导致多媒体播放卡顿时，会导致延时累积，进而导致直播时延过大。
技术实现思路
本申请提供一种多媒体直播方法、装置及设备，在避免直播多媒体出现卡顿的基础上，降低终端设备的多媒体播放点与直播点之间的时延。第一方面，本申请提供一种多媒体直播方法，在终端设备进行直播第一直播多媒体的过程中，终端设备可以确定第一直播多媒体中已下载至终端设备、且未播放的多媒体的播放时长。当播放时长小于第一预设时长时，降低第一直播多媒体的播放速率，和/或，下载第一码率对应的多媒体分片，第一码率小于正在下载的多媒体分片的码率；当播放时长大于第二预设时长时，增大第一直播多媒体的播放速率，和/或，下载第二码率对应的多媒体分片，第二码率大于正在下载的多媒体分片的码率，第二预设时长大于或等于第一预设时长。在上述过程中，当播放时长小于第一预设时长时，说明终端设备当前缓存的多媒体内容较少，则降低第一直播多媒体的播放速率，和/或，下载第一码率对(第一码率小于正在下载的多媒体分片的码率)应的多媒体分片，进而可以避免直播出现卡顿。当播放时长大于第二预设时长时，说明终端设备当前缓存的多媒体内容较多，则增大第一直播多媒体的播放速率，和/或，下载第二码率(第二码率大于正在下载的多媒体分片的码率)对应的多媒体分片，进而可以降低终端设备的多媒体播放点与直播点之间的时延。由上可知，通过调整直播多媒体的播放速率和/或下载的多媒体分片的码率，可以在避免直播多媒体出现卡顿的基础上，降低终端设备的多媒体播放点与直播点之间的时延。在一种可能的实施方式中，降低第一直播多媒体的播放速率，和/或，下载第一码率对应的多媒体分片，包括：若正在下载的多媒体分片的码率大于第三码率，则确定第一码率，并下载第一码率对应的多媒体分片，第一码率小于第三码率；若正在下载的多媒体分片的码率小于第四码率，则降低第一直播多媒体的播放速率，第三码率大于或等于第四码率。在上述过程中，当播放时长小于第一预设时长时，优先调节多媒体分片的码率，在正在下载的多媒体分片的码率满足预设条件(小于第四码率)之后，再调节第一直播多媒体的播放速率，相比于降低第一直播多媒体的播放速率，降低多媒体分片的码率对用户的观看体验不良影响较小，使得上述调节过程对用户观看的不良影响较小。在另一种可能的实施方式中，增大第一直播多媒体的播放速率，和/或，下载第二码率对应的多媒体分片，包括：若正在下载的多媒体分片的码率小于第五码率，则确定第二码率，并下载第二码率对应的多媒体分片，第二码率大于第五码率；若当前下载的多媒体分片的码率大于第六码率，则增大第一直播多媒体的播放速率，第六码率大于或等于第五码率。在上述过程中，当播放时长大于第二预设时长时，优先调节多媒体分片的码率，在正在下载的多媒体分片的码率满足预设条件(大于第六码率)之后，再调节第一直播多媒体的播放速率，由于增大多媒体分片的码率可以提高第一直播多媒体的播放质量(画质更加清晰)，进而可以提高用户的观看体验。在另一种可能的实施方式中，在降低第一直播多媒体的播放速率，或者增大第一直播多媒体的播放速率之后，还包括：在确定第一直播多媒体中已下载至终端设备、且未播放的多媒体分片的播放时长在第一预设时长和第二预设时长之间时，将第一直播多媒体的播放速率设置为预设播放速率。这样，可以减少对用户观看的不良影响。在另一种可能的实施方式中，确定第一直播多媒体中已下载至终端设备、且未播放的多媒体分片的播放时长之前，还包括：确定第一直播多媒体的起播多媒体分片；根据起播多媒体分片，从服务器下载起播多媒体分片。可选的，本申请确定得到的起播多媒体分片与直播点之间的时延小于或等于三个多媒体分片对应的播放时长，因此，当确定得到的起播多媒体分片与直播点之间的时延小于三个多媒体分片对应的播放时长时，还可以降低终端设备开始直播时，终端设备的多媒体播放点与直播点之间的时延。在另一种可能的实施方式中，确定第一直播多媒体的起播多媒体分片，包括：若终端设备中存在用户预先配置的自定义起播多媒体分片标识，则根据自定义起播多媒体分片标识确定起播多媒体分片；若终端设备中不存在自定义起播多媒体分片标识，则根据终端设备的参数信息确定起播多媒体分片，参数信息包括终端设备的历史带宽和初始码率。在上述过程中，若用户在终端设备中配置了自定义起播多媒体分片标识，则根据用户配置的自定义起播多媒体分片标识确定起播多媒体分片，若用户未在终端设备中配置自定义起播多媒体分片标识，则根据终端设备的参数信息确定起播多媒体分片。使得确定得到的起播多媒体分片与用户的播放需求或者终端设备的实际情况相关，提高了确定起播多媒体分片的灵活性，进而提高了直播控制的灵活性。在另一种可能的实施方式中，根据自定义起播多媒体分片标识确定起播多媒体分片，包括：若自定义起播多媒体分片标识指示已生成的多媒体分片，则确定起播多媒体分片为自定义起播多媒体分片标识所指示的多媒体分片；若自定义起播多媒体分片标识指示正在生成的多媒体分片，则判断正在生成的多媒体分片是否可下载，若是，则确定起播多媒体分片为正在生成的多媒体分片，若否，则确定起播多媒体分片为已生成的最新的多媒体分片。在另一种可能的实施方式中，根据参数信息确定起播多媒体分片，包括：确定历史带宽和初始码率的比值所在的比值范围；获取比值范围对应的多媒体分片的标识；根据比值范围对应的多媒体分片的标识，确定起播多媒体分片。可选的，若比值范围对应的多媒体分片的标识指示已生成的多媒体分片，则确定起播多媒体分片为比值范围对应的多媒体分片的标识所指示的多媒体分片；若所示比值范围对应的多媒体分片的标识指示正在生成的多媒体分片，则判断正在生成的多媒体分片是否可下载，若是，则确定起播多媒体分片为正在生成的多媒体分片，若否，则确定起播多媒本文档来自技高网...

【技术保护点】
1.一种多媒体直播方法，其特征在于，包括：/n确定第一直播多媒体中已下载至终端设备、且未播放的多媒体的播放时长；/n当所述播放时长小于第一预设时长时，降低所述第一直播多媒体的播放速率，和/或，下载第一码率对应的多媒体分片，所述第一码率小于正在下载的多媒体分片的码率；/n当所述播放时长大于第二预设时长时，增大所述第一直播多媒体的播放速率，和/或，下载第二码率对应的多媒体分片，所述第二码率大于正在下载的多媒体分片的码率，所述第二预设时长大于或等于所述第一预设时长。/n

【技术特征摘要】
1.一种多媒体直播方法，其特征在于，包括：
确定第一直播多媒体中已下载至终端设备、且未播放的多媒体的播放时长；
当所述播放时长小于第一预设时长时，降低所述第一直播多媒体的播放速率，和/或，下载第一码率对应的多媒体分片，所述第一码率小于正在下载的多媒体分片的码率；
当所述播放时长大于第二预设时长时，增大所述第一直播多媒体的播放速率，和/或，下载第二码率对应的多媒体分片，所述第二码率大于正在下载的多媒体分片的码率，所述第二预设时长大于或等于所述第一预设时长。


2.根据权利要求1所述的方法，其特征在于，所述降低所述第一直播多媒体的播放速率，和/或，下载第一码率对应的多媒体分片，包括：
若所述正在下载的多媒体分片的码率大于第三码率，则确定所述第一码率，并下载所述第一码率对应的多媒体分片，所述第一码率小于所述第三码率；
若所述正在下载的多媒体分片的码率小于第四码率，则降低所述第一直播多媒体的播放速率，所述第三码率大于或等于所述第四码率。


3.根据权利要求1所述的方法，其特征在于，所述增大所述第一直播多媒体的播放速率，和/或，下载第二码率对应的多媒体分片，包括：
若所述正在下载的多媒体分片的码率小于第五码率，则确定所述第二码率，并下载所述第二码率对应的多媒体分片，所述第二码率大于所述第五码率；
若所述当前下载的多媒体分片的码率大于第六码率，则增大所述第一直播多媒体的播放速率，所述第六码率大于或等于所述第五码率。


4.根据权利要求1-3任一项所述的方法，其特征在于，在降低所述第一直播多媒体的播放速率，或者增大所述第一直播多媒体的播放速率之后，还包括：
在确定所述第一直播多媒体中已下载至终端设备、且未播放的多媒体分片的播放时长在所述第一预设时长和所述第二预设时长之间时，将所述第一直播多媒体的播放速率设置为预设播放速率。


5.根据权利要求1-4任一项所述的方法，其特征在于，所述确定第一直播多媒体中已下载至终端设备、且未播放的多媒体分片的播放时长之前，还包括：
确定所述第一直播多媒体的起播多媒体分片；
根据所述起播多媒体分片，从所述服务器下载所述起播多媒体分片。


6.根据权利要求5所述的方法，其特征在于，所述确定所述第一直播多媒体的起播多媒体分片，包括：
若所述终端设备中存在用户预先配置的自定义起播多媒体分片标识，则根据所述自定义起播多媒体分片标识确定起播多媒体分片；
若所述终端设备中不存在所述自定义起播多媒体分片标识，则根据所述终端设备的参数信息确定所述起播多媒体分片，所述参数信息包括所述终端设备的历史带宽和初始码率。


7.根据权利要求6所述的方法，其特征在于，所述根据所述自定义起播多媒体分片标识确定起播多媒体分片，包括：
若所述自定义起播多媒体分片标识指示已生成的多媒体分片，则确定所述起播多媒体分片为所述自定义起播多媒体分片标识所指示的多媒体分片；
若所述自定义起播多媒体分片标识指示正在生成的多媒体分片，则判断所述正在生成的多媒体分片是否可下载，若是，则确定所述起播多媒体分片为所述正在生成的多媒体分片，若否，则确定所述起播多媒体分片为已生成的最新的多媒体分片。


8.根据权利要求6所述的方法，其特征在于，所述根据所述参数信息确定所述起播多媒体分片，包括：
确定所述历史带宽和所述初始码率的比值所在的比值范围；
获取所述比值范围对应的多媒体分片的标识；
根据所述比值范围对应的多媒体分片的标识，确定所述起播多媒体分片。


9.根据权利要求8所述的方法，其特征在于，所述根据所述比值范围对应的多媒体分片的标识，确定所述起播多媒体分片，包括：
若所述比值范围对应的多媒体分片的标识指示已生成的多媒体分片，则确定所述起播多媒体分片为所述比值范围对应的多媒体分片的标识所指示的多媒体分片；
若所示比值范围对应的多媒体分片的标识指示正在生成的多媒体分片，则判断所述正在生成的多媒体分片是否可下载，若是，则确定所述起播多媒体分片为正在生成的多媒体分片，若否，则确定所述起播多媒体分片为已生成的最新的多媒体分片。


10.根据权利要求7或9所述的方法，其特征在于，所述判断所述正在生成的多媒体分片是否可下载，包括：
获取当前时刻与所述正在生成的多媒体分片的起始生成时刻的差值；
判断所述差值是否分别大于第三时长和第一时间差，所述第三时长为准备所述正在生成的多媒体分片所需的最小时长，所述第一时间差为所述正在生成的多媒体分片的播放时长与预设的提前下载时长的时间差；
若是，则确定所述正在生成的多媒体分片可下载；
若否，则确定所述正在生成的多媒体分片不可下载。


11.根据权利要求5-9任一项所述的方法，其特征在于，若所述起播多媒体分片为已生成的最新的多媒体分片，所述根据所述起播多媒体分片，从所述服务器下载所述起播多媒体分片之后，还包括：
判断所述起播多媒体分片中是否包括关键帧；
若是，则从所述关键帧处开始播放所述起播多媒体分片；
若否，则从所述起播多媒体分片的预设中间位置开始播放所述起播多媒体分片。


12.一种多媒体直播装置，其特征在于，包括第一确定模块和处理模块，其中，
所述第一确定模块用于，确定第一直播多媒体中已下载至终端设备、且未播放的多媒体的播放时长；
所述处理模块用于，...

【专利技术属性】
技术研发人员：朱勇平，徐苏磊，周爱彬，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：广东;44