本发明专利技术提供一种混合现实直播方法、装置、电子设备以及可读存储介质，该方法包括：采集直播场景的直播视频；渲染所述直播视频，得到虚拟视频；以及通过第一切片专网和第二切片专网分别传输所述直播视频和所述虚拟视频至云端服务器。本发明专利技术将直播中不同类型的视频通过不同的切片专网进行传输，改变传输方式本质，提高传输速率，同时通过混合现实直播方式提高直播互动的娱乐性。直播互动的娱乐性。直播互动的娱乐性。
【技术实现步骤摘要】
混合现实直播方法、装置、电子设备以及可读存储介质
[0001]本专利技术涉及通信领域，尤其涉及一种混合现实直播方法、装置、电子设备以及可读存储介质。
技术介绍
[0002]混合现实(Mixed Reality，MR)指的是合并现实和虚拟世界而产生的新的可视化环境。在新的可视化环境里物理和数字对象共存，并实时互动。
[0003]如今，随着电子信息科技的发展与计算机技术的不断进步，人们日常的娱乐活动也越来越丰富。其中，直播由于具有丰富的内容选择性和互动性，受到了广大用户的喜爱。
[0004]目前的直播方法一般仅通过视觉技术生成虚拟现实(Virtual Reality，VR)影像，通过5G承载通信，而这种直播方式也适用于4G网络，传输方式本质相同，传输速率较低，同时存在直播互动的娱乐性较差的问题。
技术实现思路
[0005]本专利技术提供一种混合现实直播方法、装置、电子设备以及可读存储介质，以解决直播传输方式本质未改变造成传输速率较低以及直播互动的娱乐性较差的问题。
[0006]根据本专利技术的第一方面，本专利技术提供一种混合现实直播方法，应用于电子设备，包括：采集直播场景的直播视频；渲染所述直播视频，得到虚拟视频；以及通过第一切片专网和第二切片专网分别传输所述直播视频和所述虚拟视频至云端服务器。
[0007]在一些实施例中，在渲染所述直播视频，以得到虚拟视频的步骤中，包括：分析所述直播视频的每一帧直播图像；提取所述直播图像中物体的运动轨迹的特征值；以及根据所述特征值，得到所述虚拟视频。
[0008]在一些实施例中，在提取所述直播图像中物体的运动轨迹的特征值的步骤中，包括：将每一帧直播图像划分网格，以采集特征点；过滤无效特征点；记录每一帧的有效特征点；根据每一帧的有效特征点，获取所述物体基于时间的运动轨迹；以及基于所述运动轨迹，提取所述特征值。
[0009]根据本专利技术的第二方面，本专利技术提供一种混合现实直播方法，应用于服务器，包括：接收输入端的电子设备通过第一切片专网和第二切片专网分别传输的直播视频和虚拟视频；以及传输所述直播视频和所述虚拟视频至输出端的电子设备。
[0010]根据本专利技术的第三方面，本专利技术提供一种混合现实直播方法，应用于电子设备，包括：接收云端服务器传输的直播视频和虚拟视频；以及根据所述直播视频和所述虚拟视频，显示直播视频画面或虚拟视频画面。
[0011]在一些实施例中，所述虚拟画面包括以下至少一项：所述直播画面中的人物模型、物品模型以及所述电子设备用户的模型。
[0012]在一些实施例中，所述方法还包括：接收针对所述直播视频画面或所述虚拟视频画面的切换输入；以及响应于所述切换输入，在所述直播画面与所述虚拟画面之间进行切
换。
[0013]根据本专利技术的第四方面，本专利技术提供一种混合现实直播装置，应用于电子设备，包括：采集模块，用于采集直播场景的直播视频；渲染模块，用于渲染所述直播视频，得到虚拟视频；以及第一传输模块，用于通过第一切片专网和第二切片专网分别传输所述直播视频和所述虚拟视频至云端服务器。
[0014]根据本专利技术的第五方面，本专利技术提供一种混合现实直播装置，应用于服务器，包括：第一接收模块，用于接收输入端的电子设备通过第一切片专网和第二切片专网分别传输的直播视频和虚拟视频；以及第二传输模块，用于传输所述直播视频和所述虚拟视频至输出端的电子设备。
[0015]根据本专利技术的第六方面，本专利技术提供一种混合现实直播装置，应用于电子设备，包括：第二接收模块，用于接收云端服务器传输的直播视频和虚拟视频；以及显示模块，用于根据所述直播视频和所述虚拟视频，显示直播视频画面或虚拟视频画面。
[0016]根据本专利技术的第七方面，本专利技术提供一种电子设备，包括处理器，存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如上述的混合现实直播方法的步骤。
[0017]根据本专利技术的第八方面，本专利技术提供一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如上述的混合现实直播方法。
[0018]相较现有技术，本专利技术的有益效果：本专利技术将直播中不同类型的视频通过不同的切片专网进行传输，改变传输方式本质，提高传输速率，同时通过混合现实直播方式提高直播互动的娱乐性。
附图说明
[0019]图1为本专利技术实施例提供的一种混合现实直播方法的步骤流程示意图。
[0020]图2为本专利技术实施例提供的另一种混合现实直播方法的步骤流程示意图。
[0021]图3为本专利技术实施例提供的又一种混合现实直播方法的步骤流程示意图。
[0022]图4为本专利技术实施例提供的一种混合现实直播装置的结构示意图。
[0023]图5为本专利技术实施例提供的另一种混合现实直播装置的结构示意图。
[0024]图6为本专利技术实施例提供的又一种混合现实直播装置的结构示意图。
[0025]图7为本专利技术实施例提供的一种电子设备的结构示意图。
具体实施方式
[0026]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述。显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0027]如图1所示，本专利技术提供一种混合现实直播方法，应用于电子设备，该方法包括步骤S11至S13。
[0028]步骤S11，采集直播场景的直播视频。
[0029]在本专利技术实施例中，可选的，通过摄像机或手机等拍摄直播场景，得到直播视频。
该直播场景的直播视频中包括主播和主播所在的背景环境。主播可以是人物，亦可以是物品。
[0030]步骤S12，渲染所述直播视频，得到虚拟视频。
[0031]在本专利技术实施例中，可选的，对直播视频进行渲染(如将直播视频通过图像引擎中重新构建)，形成人物以及物品的虚拟数据，根据虚拟数据已得到虚拟视频。
[0032]在一些实施例中，可选的，步骤S12具体包括：步骤S121至步骤步骤S123。
[0033]步骤S121，分析所述直播视频的每一帧直播图像。
[0034]步骤S122，提取所述直播图像中物体的运动轨迹的特征值。其中步骤S122具体包括步骤S1221至步骤S1225。
[0035]步骤S1221，将每一帧直播图像划分网格，以采集特征点。
[0036]在本专利技术实施例中，将每一帧直播图像划分为多个尺度，其中尺度为图像尺度，亦可理解为分辨率，一般为8个空间尺度，在多个空间尺度上采样能保证采样的特征点覆盖了所有空间位置和尺度。在每个尺度上通过划分网格的方式，密集采集特征点。
[0037]步骤S1222，过滤无效特征点。
[0038]在本专利技术实施例中，无效特征点为一些缺乏变化的无法跟踪的特征点，可以通过计算像素点自相关本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种混合现实直播方法，其特征在于，应用于电子设备，包括：采集直播场景的直播视频；渲染所述直播视频，得到虚拟视频；以及通过第一切片专网和第二切片专网分别传输所述直播视频和所述虚拟视频至云端服务器。2.如权利要求1所述的混合现实直播方法，其特征在于，在渲染所述直播视频，以得到虚拟视频的步骤中，包括：分析所述直播视频的每一帧直播图像；提取所述直播图像中物体的运动轨迹的特征值；以及根据所述特征值，得到所述虚拟视频。3.如权利要求2所述的混合现实直播方法，其特征在于，在提取所述直播图像中物体的运动轨迹的特征值的步骤中，包括：将每一帧直播图像划分网格，以采集特征点；过滤无效特征点；记录每一帧的有效特征点；根据每一帧的有效特征点，获取所述物体基于时间的运动轨迹；以及基于所述运动轨迹，提取所述特征值。4.一种混合现实直播方法，其特征在于，应用于服务器，包括：接收输入端的电子设备通过第一切片专网和第二切片专网分别传输的直播视频和虚拟视频；以及传输所述直播视频和所述虚拟视频至输出端的电子设备。5.一种混合现实直播方法，其特征在于，应用于电子设备，包括：接收云端服务器传输的直播视频和虚拟视频；以及根据所述直播视频和所述虚拟视频，显示直播视频画面或虚拟视频画面。6.如权利要求5所述的混合现实直播方法，其特征在于，所述虚拟画面包括以下至少一项：所述直播画面中的人物模型、物品模型以及所述电子设备用户的模型。7.如权利要求5所述的混合现实直播方法，其特征在于，所述方法还包括：接收针对所述直播视频画面或所述虚拟视频画面的切换输入；以及响应于所述切换输入，在所述直播画面与所述虚拟画面之间进行切换。8.一种...
【专利技术属性】
技术研发人员：熊壮，
申请(专利权)人：中国移动通信集团有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。