System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 直播连麦合流方法及系统技术方案_技高网

直播连麦合流方法及系统技术方案

技术编号:40822744 阅读:5 留言:0更新日期:2024-04-01 14:42
本申请公开了一种直播连麦合流方法,该方法包括:获取本地的当前场景画面和连麦的对方画面;通过纹理渲染处理所述当前场景画面和所述对方画面,将处理后的所述当前场景画面和所述对方画面进行合流,得到连麦场景画面,并将所述连麦场景画面推流至直播间;将处理后的所述当前场景画面输出到预览窗口给本地用户观看;将所述连麦场景画面输出到连麦窗口给本地用户观看。本申请还公开了一种直播连麦合流系统、电子装置和计算机可读存储介质。由此,能够实现在连麦直播时由客户端本地合流并推流到直播间,有效避免连麦直播和普通直播切换时的卡顿、黑屏现象。

【技术实现步骤摘要】

本申请涉及直播,尤其涉及一种直播连麦合流方法、系统、电子装置及计算机可读存储介质。


技术介绍

1、对于普通直播的情况,推流到直播间的画面是由可以让主播自由编辑的场景渲染生成的,由主播客户端直接提供,这个画面也会在预览区窗口中显示给主播观看。并且在直播过程中,主播可以随时在多个预设好的场景之间切换(当前选择的场景称为为“当前场景”)。

2、而在进行连麦时,现有的处理方式为:我方客户端裁剪出当前场景画面的一部分,由连麦sdk(software development kit,软件开发工具包)发送至对方客户端;同时从连麦sdk获取对方直播画面的一部分,并将该画面和我方裁剪出的画面拼在一起,组成一个新的场景(称为“连麦场景”),渲染到另一个窗口(称为“连麦窗口”)给我方主播观看。而推流到直播间的画面是由连麦服务器推送,内容为在连麦服务器中拼合的连麦两方的画面(称为“合流”)。

3、但是,在由普通直播切换为连麦直播时,就需要客户端主动断流,然后建立连麦会话,通知连麦服务器去推流到直播间。由连麦直播切换为普通直播时,则是相反的过程。上述的切换过程会产生两个问题:因为存在断流操作,直播间的画面会出现卡顿、黑屏;如果断流操作未完全结束就进行下一步推流,可能造成推流失败。


技术实现思路

1、本申请的主要目的在于提出一种直播连麦合流方法、系统、电子装置及计算机可读存储介质,旨在解决如何避免在普通直播和连麦直播之间切换时需要断流重推的问题。

2、为实现上述目的,本申请实施例提供了一种直播连麦合流方法,应用于本地客户端,所述方法包括:

3、获取本地的当前场景画面和连麦的对方画面;

4、通过纹理渲染处理所述当前场景画面和所述对方画面,将处理后的所述当前场景画面和所述对方画面进行合流,得到连麦场景画面,并将所述连麦场景画面推流至直播间;

5、将处理后的所述当前场景画面输出到预览窗口给本地用户观看;及

6、将所述连麦场景画面输出到连麦窗口给本地用户观看。

7、可选地,所述方法还包括:

8、获取本地声音源和对方声音源;

9、根据本地用户对声音开关的操作和不同的音频轨道处理所述本地声音源和所述对方声音源,根据处理后的音频输出至所述流。

10、可选地,所述通过纹理渲染处理所述当前场景画面和所述对方画面包括:

11、将所述当前场景画面渲染至第一纹理;

12、裁剪所述当前场景画面,与所述对方画面拼合为连麦场景画面,将所述连麦场景画面渲染至第三纹理;

13、将所述第三纹理的数据拷贝至第二纹理。

14、可选地,所述推流至直播间包括:

15、根据所述第二纹理的数据进行编码,将编码后的数据推流至直播间。

16、可选地,所述将处理后的所述当前场景画面输出到预览窗口给本地用户观看包括:

17、将所述第一纹理的数据绘制到所述预览窗口。

18、可选地,所述将所述连麦场景画面输出到连麦窗口给本地用户观看包括:

19、将所述第三纹理的数据绘制到所述连麦窗口。

20、可选地,所述方法还包括:

21、根据裁剪后的所述当前场景画面生成本地画面,通过连麦服务器发送至对方客户端。

22、可选地,所述方法还包括:

23、当不连麦或本地用户切换输出预览窗口画面时,将所述第一纹理的数据拷贝至所述第二纹理;

24、根据所述第二纹理的数据进行编码,将编码后的数据推流至直播间。

25、可选地,所述本地声音源包括当前场景声音源、系统声音源和其他声音源,所述根据本地用户对声音开关的操作和不同的音频轨道处理所述本地声音源和所述对方声音源包括:

26、将所述系统声音源和所述对方声音源输出至多个音频轨道中的第一轨道;

27、将所述当前场景声音源和其他声音源输出至所述多个音频轨道中的至少一个第二轨道和所述第一轨道。

28、可选地,所述将所述系统声音源和所述对方声音源输出至多个音频轨道中的第一轨道包括:

29、当开启系统音捕捉且未将对方静音时,将所述对方声音源通过系统音播放,所述系统声音源和所述对方声音源均通过系统音捕捉输出至所述第一轨道;

30、当关闭系统音捕捉且未将对方静音时,将所述对方声音源输出至所述第一轨道,且所述系统声音源不输出至所述第一轨道,同时将所述对方声音源通过系统音播放;

31、当开启系统音捕捉且将对方静音时,不播放所述对方声音源,将所述系统声音源和所述对方声音源分别输出至所述第一轨道;

32、当关闭系统音捕捉且将对方静音时,不播放所述对方声音源,将所述对方声音源输出至所述第一轨道,且所述系统声音源不输出至所述第一轨道。

33、可选地,所述根据处理后的音频输出至所述流包括:

34、将所述第一轨道的音频进行编码后输出至所述流。

35、可选地,所述方法还包括:

36、将所述第二轨道的音频通过连麦服务器发送至对方客户端。

37、此外,为实现上述目的,本申请实施例还提供一种直播连麦合流系统,所述系统包括:

38、获取模块,用于获取本地的当前场景画面和连麦的对方画面;

39、合流模块,用于通过纹理渲染处理所述当前场景画面和所述对方画面,将处理后的所述当前场景画面和所述对方画面进行合流,得到连麦场景画面,并将所述连麦场景画面推流至直播间;

40、输出模块,用于将处理后的所述当前场景画面输出到预览窗口给本地用户观看;及将所述连麦场景画面输出到连麦窗口给本地用户观看。

41、为实现上述目的,本申请实施例还提供一种电子装置,所述电子装置包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的直播连麦合流程序,所述直播连麦合流程序被所述处理器执行时实现如上述的直播连麦合流方法。

42、为实现上述目的,本申请实施例还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有直播连麦合流程序,所述直播连麦合流程序被处理器执行时实现如上述的直播连麦合流方法。

43、本申请实施例提出的直播连麦合流方法、系统、电子装置及计算机可读存储介质,能够通过对直播视频中当前场景画面和对方画面的处理,实现在连麦直播时由客户端本地合流并推流到直播间,不再由连麦服务器合流和推流,使得普通直播和连麦直播均使用同一路流,在切换时仅仅改变流的数据内容,从而有效避免连麦直播和普通直播切换时的卡顿、黑屏现象。

本文档来自技高网...

【技术保护点】

1.一种直播连麦合流方法,应用于本地客户端,其特征在于,所述方法包括:

2.根据权利要求1所述的直播连麦合流方法,其特征在于,所述方法还包括:

3.根据权利要求1或2所述的直播连麦合流方法,其特征在于,所述通过纹理渲染处理所述当前场景画面和所述对方画面包括:

4.根据权利要求3所述的直播连麦合流方法,其特征在于,所述推流至直播间包括:

5.根据权利要求3或4所述的直播连麦合流方法,其特征在于,所述将处理后的所述当前场景画面输出到预览窗口给本地用户观看包括:

6.根据权利要求3至5任一项所述的直播连麦合流方法,其特征在于,所述将所述连麦场景画面输出到连麦窗口给本地用户观看包括:

7.根据权利要求3至6任一项所述的直播连麦合流方法,其特征在于,所述方法还包括:

8.根据权利要求3所述的直播连麦合流方法,其特征在于,所述方法还包括:

9.根据权利要求2至8任一项所述的直播连麦合流方法,其特征在于,所述本地声音源包括当前场景声音源、系统声音源和其他声音源,所述根据本地用户对声音开关的操作和不同的音频轨道处理所述本地声音源和所述对方声音源包括:

10.根据权利要求9所述的直播连麦合流方法,其特征在于,所述将所述系统声音源和所述对方声音源输出至多个音频轨道中的第一轨道包括:

11.根据权利要求9或10所述的直播连麦合流方法,其特征在于,所述根据处理后的音频输出至所述流包括:

12.根据权利要求9至11任一项所述的直播连麦合流方法,其特征在于,所述方法还包括:

13.一种直播连麦合流系统,其特征在于,所述系统包括:

14.一种电子装置,其特征在于,所述电子装置包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的直播连麦合流程序,所述直播连麦合流程序被所述处理器执行时实现如权利要求1至12中任一项所述的直播连麦合流方法。

15.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有直播连麦合流程序,所述直播连麦合流程序被处理器执行时实现如权利要求1至12中任一项所述的直播连麦合流方法。

...

【技术特征摘要】

1.一种直播连麦合流方法,应用于本地客户端,其特征在于,所述方法包括:

2.根据权利要求1所述的直播连麦合流方法,其特征在于,所述方法还包括:

3.根据权利要求1或2所述的直播连麦合流方法,其特征在于,所述通过纹理渲染处理所述当前场景画面和所述对方画面包括:

4.根据权利要求3所述的直播连麦合流方法,其特征在于,所述推流至直播间包括:

5.根据权利要求3或4所述的直播连麦合流方法,其特征在于,所述将处理后的所述当前场景画面输出到预览窗口给本地用户观看包括:

6.根据权利要求3至5任一项所述的直播连麦合流方法,其特征在于,所述将所述连麦场景画面输出到连麦窗口给本地用户观看包括:

7.根据权利要求3至6任一项所述的直播连麦合流方法,其特征在于,所述方法还包括:

8.根据权利要求3所述的直播连麦合流方法,其特征在于,所述方法还包括:

9.根据权利要求2至8任一项所述的直播连麦合流方法,其特征在于,所述本地声音源包括当前场景声音源、系统声音源和其...

【专利技术属性】
技术研发人员:胡江涛姜军
申请(专利权)人:上海哔哩哔哩科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1