音视频的连麦合流方法、装置、电子设备及存储介质制造方法及图纸

本发明专利技术涉及视频合成技术领域，提供音视频的连麦合流方法、装置、电子设备及存储介质，方法包括：提取所述互动服务器接收的多股音视频数据；将获取到的所述音视频数据进行分离，得到多股音频数据流与多股视频数据流；在所述互动服务器中对所述多股视频数据流进行合流后得到合流视频数据流，并发送至流媒体服务器，同时直接将所述多股音频数据流发送至所述流媒体服务器；所述流媒体服务器将所述多股音频数据流与所述合流视频数据流发送至客户端，在客户端对所述多股音频数据流的合流参数进行修改，得到合流音频数据流；在所述客户端对所述合流视频数据流以及所述合流音频数据流输出。本发明专利技术能够实现用户定制化服务，打破用户获取数据的局限性。

【技术实现步骤摘要】
音视频的连麦合流方法、装置、电子设备及存储介质
本专利技术涉及视频合成
，尤其涉及音视频的连麦合流方法、装置、电子设备及存储介质。
技术介绍
如今，在多人连麦的直播场景下，通常的做法是将主播的音视频流在互动服务器进行合流，得到一条合流之后的音频轨和视频轨，然后再通过rtmp协议(实时传输协议)以steam形式将音频轨和视频轨转发至流媒体服务器，最后由其转发给普通直播观众。在这样的架构下，观众无需对音视频进行更多的处理即可观看，流畅度、体验度都有非常大的提升。然而，在某些情况下，部分普通直播观众出于个人感情或者其他因素，并不希望看到抑或听到某个、某些主播的画面、声音，或者是只想看某个主播而不想看其他主播。显然，在这样的情形之下，当前“一刀切”式的合流架构是无法满足这些观众的需求的。可见，现有技术中，存在客户无法定制化地对其中某位、多位主播禁音或关闭画面的问题。
技术实现思路
本专利技术实施例提供一种音视频的连麦合流方法，能够在基于服务端合流架构的直播类服务中，当多位主播连麦参与活动时，能为用户提供定制化服务。...

【技术保护点】
1.音视频的连麦合流方法，其特征在于，包括以下步骤：/n检测到互动服务器进入连麦模式后，提取所述互动服务器接收的多股音视频数据；/n将获取到的所述音视频数据进行分离，得到多股音频数据流与多股视频数据流；/n在所述互动服务器中对所述多股视频数据流进行合流后得到合流视频数据流，并发送至流媒体服务器，同时直接将所述多股音频数据流发送至所述流媒体服务器；/n所述流媒体服务器将所述多股音频数据流与所述合流视频数据流发送至客户端，在客户端对所述多股音频数据流的合流参数进行修改，得到合流音频数据流；/n在所述客户端对所述合流视频数据流以及所述合流音频数据流输出。/n

【技术特征摘要】
1.音视频的连麦合流方法，其特征在于，包括以下步骤：
检测到互动服务器进入连麦模式后，提取所述互动服务器接收的多股音视频数据；
将获取到的所述音视频数据进行分离，得到多股音频数据流与多股视频数据流；
在所述互动服务器中对所述多股视频数据流进行合流后得到合流视频数据流，并发送至流媒体服务器，同时直接将所述多股音频数据流发送至所述流媒体服务器；
所述流媒体服务器将所述多股音频数据流与所述合流视频数据流发送至客户端，在客户端对所述多股音频数据流的合流参数进行修改，得到合流音频数据流；
在所述客户端对所述合流视频数据流以及所述合流音频数据流输出。


2.如权利要求1所述的音视频的连麦合流方法，其特征在于，所述方法包括：
在所述互动服务器中对所述多股音频数据流进行合流，得到合流视频数据流；
在所述互动服务器中对所述多股视频数据流进行合流，得到合流音频数据流；
将合流视频数据流与合流音频数据流直接发送到所述流媒体服务器，基于所述流媒体服务器转发到所述客户端进行输出。


3.如权利要求1所述的音视频的连麦合流方法，其特征在于，所述方法还包括步骤：
所述流媒体服务器接收所述合流视频数据流和所述音频数据流后，将所述合流视频数据流和所述音频数据进行云端存储以及后台数据处理，所述后台数据处理包括对合流视频数据流和所述音频数据进行安全性判断。


4.如权利要求1所述的音视频的连麦合流方法，其特征在于，所述在所述互动服务器中对所述多股视频数据流进行合流后得到合流视频数据流，并发送至流媒体服务器的步骤包括：
检测到完成所述合流视频数据流后，所述互动服务器通过实时传输协议将所述合流视频数据流发送至所述流媒体服务器。


5.如权利要求4所述的音视频的连麦合流方法，其特征在于，所述流媒体服务器将所述多股音频数据流与所述合流视频数据流发送至客户端的步骤包括：
所述流媒体服务器通过所述实时传输协议/分片传输协议将所述多股音频数据流与所述合流视频数据流发送至客户端。
<...

【专利技术属性】
技术研发人员：葛余浩，
申请(专利权)人：上海七牛信息技术有限公司，
类型：发明
国别省市：上海;31