网络直播的连麦互动方法、装置及直播系统制造方法及图纸

本申请涉及一种网络直播的连麦互动方法、装置及直播系统，所述方法包括：建立当前主播端与其他主播端的直播连麦；获取连麦主播的原始视频图像及其人像抠图信息，并生成连麦主播的视频流信息；将所述连麦主播的视频流信息上传至直播服务器；其中，所述直播服务器从所述视频流信息中抠出连麦主播的人像图像，将至少两个连麦主播的人像图像与背景图像进行合成得到虚拟同台场景，并基于所述虚拟同台场景进行直播连麦互动生成连麦视频流推送至观众端；该技术方案，实现了虚拟同台连麦效果，丰富了直播内容，增强直播互动性，提升直播连麦的沉浸式体验，实现了不同地域主播于同个虚拟场景下进行连麦，并且基于虚拟同台场景下连麦，可以延生出多种互动玩法，提升了连麦互动效果。提升了连麦互动效果。提升了连麦互动效果。

【技术实现步骤摘要】
网络直播的连麦互动方法、装置及直播系统
[0001]本申请要求于2022年04月14日提交中国专利局、申请号为202210387980.X、专利技术名称为“网络直播的连麦互动方法、装置及直播系统”的中国专利申请的优先权，其全部内容通过引用结合在本申请中。


[0002]本申请涉及网络直播
，特别是一种网络直播的连麦互动方法、装置及直播系统。

技术介绍

[0003]近年来，网络直播以其内容和形式的直观性、即时性和互动性，在促进灵活就业、促进经济社会发展、丰富人民群众精神文化生活等方面发挥了重要作用。比如，通过网络直播加强商品流通，盘活农村经济，拉近人与人之间的距离，传播文化；利用网络直播的虚拟礼物形式，使得主播可以通过在直播间中更好地展现自己才艺才华，从而为更多主播实现了自我价值。
[0004]随着移动互联网新技术新应用的迭代升级，网络直播行业进入了快速发展期，其媒体属性、社交属性、商业属性、娱乐属性日益凸显，深刻影响网络生态。直播连麦是一种网络直播中的常见互动方式，对于提升用户体验与参与感有明显作用，可以也提升直播平台的用户活跃度。
[0005]目前，常见的直播连麦方式一般是将多个连麦主播的视频画面拼接显示，每个连麦主播背景相对独立，导致直播连麦交互效果不佳，连麦主播之间难以在拼接的视频画面上开展如亲临现场般的直播互动，影响连麦互动效果。

技术实现思路

[0006]基于此，有必要针对上述至少一种技术缺陷，提供一种网络直播的连麦互动方法、装置及直播系统，以提升连麦互动效果。<br/>[0007]一种网络直播的连麦互动方法，应用于连麦主播端，包括：
[0008]建立当前主播端与其他主播端的直播连麦；
[0009]获取连麦主播的原始视频图像及其人像抠图信息，并生成连麦主播的视频流信息；
[0010]将所述连麦主播的视频流信息上传至直播服务器；
[0011]其中，所述直播服务器从所述视频流信息中抠出连麦主播的人像图像，将至少两个连麦主播的人像图像与背景图像进行合成得到虚拟同台场景，并基于所述虚拟同台场景进行直播连麦互动生成连麦视频流推送至观众端。
[0012]在一个实施例中，所述建立当前主播端与其他主播端的直播连麦，包括：
[0013]响应于直播连麦请求建立连麦连接，将当前主播端切换到横屏模式，并将当前主播端调整至与其他主播端的开播分辨率一致的比例。
[0014]在一个实施例中，所述获取连麦主播的原始视频图像及其人像抠图信息，并生成连麦主播的视频流信息，包括：
[0015]采集当前主播端的连麦主播的原始视频图像；
[0016]对所述原始视频图像进行背景颜色分割得到Alpha图像；其中，所述人像抠图信息描述为Alpha图像；
[0017]将所述原始视频图像与所述Alpha图像进行拼接得到主播视频传输图像；
[0018]将所述主播视频传输图像进行编码，并与特效信息封装成所述连麦主播的视频流信息。
[0019]在一个实施例中，所述网络直播的连麦互动方法，还包括：对所述原始视频图像进行AI识别得到连麦主播的AI关键点信息；
[0020]所述将所述主播视频传输图像进行编码，并与特效信息封装成所述连麦主播的视频流信息，包括：
[0021]获取所述连麦主播在直播中所具有的虚拟特效，并生成描述所述虚拟特效的特效信息；
[0022]将编码的主播视频传输图像、所述AI关键点信息和特效信息封装成所述连麦主播的视频流信息。
[0023]在一个实施例中，所述的网络直播的连麦互动方法，还包括：
[0024]接收所述直播服务器下发的其他主播端上传的连麦主播的视频流信息；
[0025]根据所述视频流信息获取其他主播端的连麦主播的人像图像；
[0026]获取当前主播端的连麦主播的人像图像，在当前主播端上将各个主播端的连麦主播的人像图像以及背景图像进行合成得到虚拟同台场景。
[0027]在一个实施例中，所述的网络直播的连麦互动方法，还包括：
[0028]接收所述直播服务器下发的调整参数；
[0029]根据所述调整参数对所述原始视频图像进行调整，以及生成图像调整信息进行提示。
[0030]一种网络直播的连麦互动装置，应用于连麦主播端，包括：
[0031]连麦模块，用于建立当前主播端与其他主播端的直播连麦；
[0032]编码模块，用于获取连麦主播的原始视频图像及其人像抠图信息，并生成连麦主播的视频流信息；
[0033]上传模块，用于将所述连麦主播的视频流信息上传至直播服务器；
[0034]其中，所述直播服务器从所述视频流信息中抠出连麦主播的人像图像，将至少两个连麦主播的人像图像与背景图像进行合成得到虚拟同台场景，并基于所述虚拟同台场景进行直播连麦互动生成连麦视频流推送至观众端。
[0035]一种网络直播的连麦互动方法，应用于直播服务器，包括：
[0036]接收至少两个主播端上传的连麦主播的视频流信息；其中，所述视频流信息包括连麦主播的原始视频图像及其人像抠图信息；
[0037]根据所述视频流信息中的人像抠图信息从原始视频图像中抠出连麦主播的人像图像；
[0038]将各个连麦主播的人像图像与背景图像进行合成得到虚拟同台场景；
[0039]基于所述虚拟同台场景进行所述连麦主播的直播连麦互动，并生成连麦视频流推送至观众端。
[0040]在一个实施例中，所述视频流信息包括：主播视频传输图像、AI关键点信息和特效信息；其中，所述主播视频传输图像包括连麦主播的原始视频图像及Alpha图像；
[0041]所述根据所述视频流信息中的人像抠图信息从原始视频图像中抠出连麦主播的人像图像，包括：
[0042]根据所述Alpha图像分别从各个连麦主播的原始视频图像中抠出所述连麦主播的人像图像；
[0043]所述将各个连麦主播的人像图像与背景图像进行合成得到虚拟同台场景，包括：
[0044]将至少两个连麦主播的人像图像与背景图像在视频区域进行合成；
[0045]根据所述特效信息获取各个连麦主播在直播中所具有的虚拟特效，并利用所述AI关键点信息对所述虚拟特效内容在视频区域中的位置进行换算得到所述虚拟特效内容的渲染位置；
[0046]在所述渲染位置上渲染所述虚拟特效内容，得到虚拟同台场景。
[0047]在一个实施例中，所述生成连麦视频流推送至观众端，包括：
[0048]获取连麦主播在所述虚拟同台场景上进行互动直播产生的连麦视频图像以及互动特效；
[0049]将所述连麦视频图像以及互动特效进行编码成连麦视频流；
[0050]将所述连麦视频流推送到CDN分发网络，分发至观众端。
[0051]在一个实施例中，所述基于所述虚拟同台场景进行所述连麦主播的直播连麦互动，包括：
[0052]接收第一连麦主播在直播互动中向第二连麦主播赠送的虚拟礼物本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种网络直播的连麦互动方法，应用于连麦主播端，其特征在于，包括：建立当前主播端与其他主播端的直播连麦；获取连麦主播的原始视频图像及其人像抠图信息，并生成连麦主播的视频流信息；将所述连麦主播的视频流信息上传至直播服务器；其中，所述直播服务器从所述视频流信息中抠出连麦主播的人像图像，将至少两个连麦主播的人像图像与背景图像进行合成得到虚拟同台场景，并基于所述虚拟同台场景进行直播连麦互动生成连麦视频流推送至观众端。2.根据权利要求1所述的网络直播的连麦互动方法，其特征在于，所述建立当前主播端与其他主播端的直播连麦，包括：响应于直播连麦请求建立连麦连接，将当前主播端切换到横屏模式，并将当前主播端调整至与其他主播端的开播分辨率一致的比例。3.根据权利要求1所述的网络直播的连麦互动方法，其特征在于，所述获取连麦主播的原始视频图像及其人像抠图信息，并生成连麦主播的视频流信息，包括：采集当前主播端的连麦主播的原始视频图像；对所述原始视频图像进行背景颜色分割得到Alpha图像；其中，所述人像抠图信息描述为Alpha图像；将所述原始视频图像与所述Alpha图像进行拼接得到主播视频传输图像；将所述主播视频传输图像进行编码，并与特效信息封装成所述连麦主播的视频流信息。4.根据权利要求3所述的网络直播的连麦互动方法，其特征在于，还包括：对所述原始视频图像进行AI识别得到连麦主播的AI关键点信息；所述将所述主播视频传输图像进行编码，并与特效信息封装成所述连麦主播的视频流信息，包括：获取所述连麦主播在直播中所具有的虚拟特效，并生成描述所述虚拟特效的特效信息；将编码的主播视频传输图像、所述AI关键点信息和特效信息封装成所述连麦主播的视频流信息。5.根据权利要求4所述的网络直播的连麦互动方法，其特征在于，还包括：接收所述直播服务器下发的其他主播端上传的连麦主播的视频流信息；根据所述视频流信息获取其他主播端的连麦主播的人像图像；获取当前主播端的连麦主播的人像图像，在当前主播端上将各个主播端的连麦主播的人像图像以及背景图像进行合成得到虚拟同台场景。6.根据权利要求4所述的网络直播的连麦互动方法，其特征在于，还包括：接收所述直播服务器下发的调整参数；根据所述调整参数对所述原始视频图像进行调整，以及生成图像调整信息进行提示。7.一种网络直播的连麦互动装置，应用于连麦主播端，其特征在于，包括：连麦模块，用于建立当前主播端与其他主播端的直播连麦；编码模块，用于获取连麦主播的原始视频图像及其人像抠图信息，并生成连麦主播的视频流信息；
上传模块，用于将所述连麦主播的视频流信息上传至直播服务器；其中，所述直播服务器从所述视频流信息中抠出连麦主播的人像图像，将至少两个连麦主播的人像图像与背景图像进行合成得到虚拟同台场景，并基于所述虚拟同台场景进行直播连麦互动生成连麦视频流推送至观众端。8.一种网络直播的连麦互动方法，应用于直播服务器，其特征在于，包括：接收至少两个主播端上传的连麦主播的视频流信息；其中，所述视频流信息包括连麦主播的原始视频图像及其人像抠图信息；根据所述视频流信息中的人像抠图信息从原始视频图像中抠出连麦主播的人像图像；将各个连麦主播的人像图像与背景图像进行合成得到虚拟同台场景；基于所述虚拟同台场景进行所述连麦主播的直播连麦互动，并生成连麦视频流推送至观众端。9.根据权利要求8所述的网络直播的连麦互动方法，其特征在于，所述视频流信息包括：主播视频传输图像、AI关键点信息和特效信息；其中，所述主播视频传输图像包括连麦主播的原始视频图像及Alpha图像；所述根据所述视频流信息中的人像抠图信息从原始视频图像中抠出连麦主播的人像图像，包括：根据所述Alpha图像分别从各个连麦主播的原始视频图像中抠出所述连麦主播的人像图像；所述将各个连麦主播的人像图像与背景图像进行合成得到虚拟同台场景，包括：将至少两个连麦主播的人像图像与背景图像在视频区域进行合成；根据所述特效信息获取各个连麦主播在直播中所具有的虚拟特效，并利...

【专利技术属性】
技术研发人员：张德恒，许少龙，廖国光，杨泉宇，林忠涛，石勇慧，董炼，闫理，吴荣鑫，龙土兴，黄煜，
申请(专利权)人：广州方硅信息技术有限公司，
类型：发明
国别省市：