【技术实现步骤摘要】
一种基于多流媒体节点的资源连接系统、方法及装置
[0001]本文涉及人工智能领域,尤其是一种基于多流媒体节点的资源连接系统、方法及装置。
技术介绍
[0002]目前,用户通常基于一对一交互场景与基于智能问答的虚拟数字人交互,获得较好的音视频交互体验。
[0003]在一对一交互场景下,虚拟数字人交互系统会启动一定数量的房间,房间里是预设好的虚拟数字人。用户终端设备请求接入虚拟数字人时,系统会先给用户分配空闲的房间,用户终端根据房间号请求流媒体服务器,获取对应房间渲染出的数字人音视频流,从而确保用户与虚拟数字人能够进行实时音视频交互。由于用户与数字人的实时交互是经过中间的流媒体服务器来转发音视频流数据完成的,因此保证流媒体服务器的高可用性非常重要。
[0004]如果流媒体服务器崩溃或者所在节点宕机,将导致用户终端无法连接虚拟数字人。现有技术中通过每个房间向多个流媒体服务进行推流、用户通过网关路由到不同的流媒体服务进行拉流的方式应对节点宕机的情形,但这种方式造成了极大的资源浪费,每个虚拟数字人推流到流媒体服务器会消耗大量的网络带宽资源,而每个用户只会占用一路资源,如果是双节点流媒体服务集群的应用场景,每个房间使用带宽会增加一倍,资源浪费较大。
技术实现思路
[0005]为解决上述现有技术中推拉流造成带宽资源浪费的问题,本文实施例提供了一种基于多流媒体节点的资源连接系统、方法及装置。
[0006]本文实施例提供了一种基于多流媒体节点的资源连接方法,
[0007]根据本文实施例的 ...
【技术保护点】
【技术特征摘要】
1.一种基于多流媒体节点的资源连接方法,其特征在于,所述方法包括:接收用户端发送的资源连接请求,其中,所述资源连接请求包括用户端支持的数据流编解码信息;将所述资源连接请求发送至多个流媒体节点,以使多个流媒体节点根据所述资源连接请求识别用户知识等级并匹配对应的流媒体资源空间,形成流媒体资源连接信息;接收所述流媒体资源连接信息,并发送至用户端;接收所述用户端根据所述流媒体资源连接信息生成的服务器连接请求;根据所述服务器连接请求,确定用户端待连接的至少一个流媒体节点;根据至少一个流媒体节点发送的媒体协商信息及用户端支持的数据流编解码信息,建立用户端与对应流媒体节点的通信连接。2.根据权利要求1根据所述的基于多流媒体节点的资源连接方法,其特征在于,所述匹配对应的流媒体资源空间包括:从多个流媒体资源空间中,选择处于空闲状态的流媒体资源空间作为可用流媒体资源空间。3.根据权利要求2所述的基于多流媒体节点的资源连接方法,其特征在于,根据所述服务器连接请求,将所述用户端路由至对应的至少一个流媒体节点包括:获取服务器连接请求中包含的可用流媒体资源空间的编号;利用所述编号对所述流媒体节点总数量取余,得到余数结果;根据所述余数结果及预设路由规则,确定用户端对应的至少一个流媒体节点。4.根据权利要求3根据所述的基于多流媒体节点的资源连接方法,其特征在于,根据至少一个流媒体节点发送的媒体协商信息及用户端支持的数据流编解码信息,建立用户端与对应流媒体节点的通信连接,包括:获取对应的至少一个流媒体节点的媒体协商信息,所述媒体协商信息对应该流媒体节点管理的流媒体资源的音视频编解码格式;选择媒体协商信息与用户端支持的数据流编解码信息一致的流媒体节点,作为所述对应流媒体节点;将所述对应流媒体节点发送至用户端,由所述用户端与所述对应流媒体节点建立通信。5.根据权利要求4所述的基于多流媒体节点的资源连接方法,其特征在于,建立用户端与流媒体节点的通信连接包括:监听所述流媒体节点管理的多个udp端口的状态,确定处于可用状态的udp端口;选择所述处于可用状态的udp端口中的其中一个,作为所述媒体协商信息中的udp端口;将udp端口号发送至用户端,由用户端根据所述流媒体节点的udp端口号与所述流媒体节点建立通信连接。6.根据权利要求5所述的基于多流媒体节点的资源连接方法,其特征在于,若多个流媒体节点中的部分流媒体节点异常,所述方法包括:控制注册在异常流媒体节点上的流媒体资源停止推流;更新停止推流的流媒体资源空间的状态为等待状态;
新增流媒体节点,接管所述停止推流的流媒体资源;根据用户端的服务器连接请求,更新用户端与流媒体节点的路由关系。7.一种网关服务器,其特征在于,包括:接收单元,用于接收用户端发送的资源连接请求,其中,所述资源连接请求包括用户端支持的数据流编解码信息;流媒体资源连接信息形成单元,用于将所述资源连接请求发送至多个流媒体节点,以使多个流媒体节点根据所述资源连接请求识别用户知识等级并匹配对应的流媒体资源空间,形成流媒体资源连接信息;第一接收单元,用于接收所述流媒体资源连接信息,并发送至客户端;第二接收单元,用于接收所述用户端根据所述流媒体资源连接信息生成的服务器连接请求;路由单元,用于根据所述服务器连接请求...
【专利技术属性】
技术研发人员:胡孙强,叶志远,秦超,
申请(专利权)人:建信金融科技有限责任公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。