虚幻引擎像素流送方法及装置制造方法及图纸

本发明专利技术实施例提供一种虚幻引擎像素流送方法及装置，该方法包括：实时获取渲染完成的帧数据，将帧数据存储到第一渲染目标；其中，第一渲染目标位于中央处理器，且第一渲染目标支持图形处理器以大于预设速度写入；读回第一渲染目标的帧数据，从而将帧数据转换为中央处理器能够处理的显式数据；将第一渲染目标的帧数据推送给实时通信服务器，以供实时通信服务器对第一渲染目标的帧数据进行编码后得到目标格式的像素流，将像素流推送给客户端解码并显示帧数据。本发明专利技术实施例提供的虚幻引擎像素流送方法及装置，实现了利用实时通信服务器进行编码及像素流送，大大降低了像素流送的延时，并且支持多种编码格式。并且支持多种编码格式。并且支持多种编码格式。

【技术实现步骤摘要】
虚幻引擎像素流送方法及装置


[0001]本专利技术实施例涉及计算机
，具体涉及一种虚幻引擎像素流送方法及装置。

技术介绍

[0002]虚幻引擎(Unreal Engine，UE)像素流送(Pixel Streaming)允许从任何有屏幕的联网设备(例如计算机，手机，平板电脑等)播放虚幻项目。使用像素流的好处是，输出设备不需要处理所有的场景、物理仿真和交互，只需要有一个屏幕和互联网连接。
[0003]现有的虚幻引擎像素流送插件，基于WebRTC(Web Real
‑
Time Communication，网页即时通信)服务实现，虚幻引擎需要在本地编码后发送给WebRTC进行像素流送，编码格式上只支持H264的格式，并且在与客户端视频流传输上有着较大的延时。

技术实现思路

[0004]针对现有技术存在的缺陷，本专利技术实施例提供一种虚幻引擎像素流送方法及装置。
[0005]本专利技术实施例提供一种虚幻引擎像素流送方法，包括：实时获取渲染完成的帧数据，将所述帧数据存储到第一渲染目标；其中，所述第一渲染目标位于中央处理器，且所述第一渲染目标支持图形处理器以大于预设速度写入；读回所述第一渲染目标的所述帧数据，从而将所述帧数据转换为所述中央处理器能够处理的显式数据；将所述第一渲染目标的所述帧数据推送给实时通信服务器，以供所述实时通信服务器对所述第一渲染目标的所述帧数据进行编码后得到目标格式的像素流，将所述像素流推送给客户端解码并显示所述帧数据。
[0006]根据本专利技术实施例提供的一种虚幻引擎像素流送方法，所述实时获取渲染完成的帧数据，将所述帧数据存储到第一渲染目标，包括：通过渲染线程执行所述实时获取渲染完成的帧数据，将所述帧数据存储到第一渲染目标；所述读回所述第一渲染目标的所述帧数据，从而将所述帧数据转换为所述中央处理器能够处理的显式数据，包括：通过读回与推送线程执行所述读回所述第一渲染目标的所述帧数据，从而将所述帧数据转换为所述中央处理器能够处理的显式数据；所述将所述第一渲染目标的所述帧数据推送给实时通信服务器，包括：通过所述读回与推送线程执行所述将所述第一渲染目标的所述帧数据推送给实时通信服务器。
[0007]根据本专利技术实施例提供的一种虚幻引擎像素流送方法，所述实时获取渲染完成的帧数据，将所述帧数据存储到第一渲染目标，包括：实时从后缓冲区获取渲染完成的所述帧数据，将所述帧数据进行格式转换并存储到对应格式的第二渲染目标；其中，所述对应格式为所述实时通信服务器可读的显式格式；将所述第二渲染目标中的所述帧数据拷贝到位于所述中央处理器的所述第一渲染目标。
[0008]根据本专利技术实施例提供的一种虚幻引擎像素流送方法，所述将所述帧数据进行格
式转换并存储到对应格式的第二渲染目标，包括：通过渲染一趟的方式将所述帧数据进行格式转换并存储到对应格式的第二渲染目标。
[0009]根据本专利技术实施例提供的一种虚幻引擎像素流送方法，所述方法实现于与所述实时通信服务器处于同一内网的服务器上。
[0010]根据本专利技术实施例提供的一种虚幻引擎像素流送方法，所述方法还包括：响应于检测到运行于所述客户端的浏览器静止，降低向所述实时通信服务器推送所述第一渲染目标的所述帧数据的推送帧率，并提高渲染采样数。
[0011]本专利技术实施例还提供一种虚幻引擎像素流送装置，包括：获取模块，用于：实时获取渲染完成的帧数据，将所述帧数据存储到第一渲染目标；其中，所述第一渲染目标位于中央处理器，且所述第一渲染目标支持图形处理器以大于预设速度写入；读回模块，用于：读回所述第一渲染目标的所述帧数据，从而将所述帧数据转换为所述中央处理器能够处理的显式数据；流送模块，用于：将所述第一渲染目标的所述帧数据推送给实时通信服务器，以供所述实时通信服务器对所述第一渲染目标的所述帧数据进行编码后得到目标格式的像素流，并将所述像素流推送给客户端解码并显示所述帧数据。
[0012]本专利技术实施例还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述虚幻引擎像素流送方法的步骤。
[0013]本专利技术实施例还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述虚幻引擎像素流送方法的步骤。
[0014]本专利技术实施例还提供一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现如上述任一种所述虚幻引擎像素流送方法的步骤。
[0015]本专利技术实施例提供的虚幻引擎像素流送方法及装置，通过实时获取渲染完成的帧数据，将帧数据存储到第一渲染目标，读回第一渲染目标的帧数据，从而将帧数据转换为中央处理器能够处理的显式数据，将第一渲染目标的帧数据推送给实时通信服务器，以供实时通信服务器对第一渲染目标的帧数据进行编码后得到目标格式的像素流，将像素流推送给客户端解码并显示帧数据，实现了利用实时通信服务器进行编码及像素流送，大大降低了像素流送的延时，并且支持多种编码格式。
附图说明
[0016]为了更清楚地说明本专利技术的技术方案，下面将对实施例描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0017]图1是本专利技术实施例提供的虚幻引擎像素流送方法的流程示意图之一；
[0018]图2是本专利技术实施例提供的虚幻引擎像素流送方法的流程示意图之二；
[0019]图3是本专利技术实施例提供的虚幻引擎像素流送装置的结构示意图；
[0020]图4是本专利技术实施例提供的电子设备的结构示意图。
具体实施方式
[0021]为使本专利技术的目的、技术方案和优点更加清楚，下面将结合本专利技术中的附图，对本
专利技术中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0022]图1是本专利技术实施例提供的虚幻引擎像素流送方法的流程示意图之一。如图1所示，所述方法包括：
[0023]步骤S1、实时获取渲染完成的帧数据，将所述帧数据存储到第一渲染目标；其中，所述第一渲染目标位于中央处理器，且所述第一渲染目标支持图形处理器以大于预设速度写入。
[0024]实时获取虚幻引擎渲染完成的帧数据，该帧数据是虚幻引擎渲染完成的、可以在客户端的浏览器上显示的数据，如图像数据。渲染完成的帧数据是存储于图形处理器GPU中的，本专利技术实施例要利用实时通信(RTC，Real
‑
Time Communication)服务器进行编码，需要通过中央处理器CPU与实时通信服务器建立通信。因此，将渲染完成的帧数据存储到第一渲染目标，第一渲染目标位于中央处理器CPU，从而使得CPU可读回第一渲染本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种虚幻引擎像素流送方法，其特征在于，包括：实时获取渲染完成的帧数据，将所述帧数据存储到第一渲染目标；其中，所述第一渲染目标位于中央处理器，且所述第一渲染目标支持图形处理器以大于预设速度写入；读回所述第一渲染目标的所述帧数据，从而将所述帧数据转换为所述中央处理器能够处理的显式数据；将所述第一渲染目标的所述帧数据推送给实时通信服务器，以供所述实时通信服务器对所述第一渲染目标的所述帧数据进行编码后得到目标格式的像素流，将所述像素流推送给客户端解码并显示所述帧数据。2.根据权利要求1所述的虚幻引擎像素流送方法，其特征在于，所述实时获取渲染完成的帧数据，将所述帧数据存储到第一渲染目标，包括：通过渲染线程执行所述实时获取渲染完成的帧数据，将所述帧数据存储到第一渲染目标；所述读回所述第一渲染目标的所述帧数据，从而将所述帧数据转换为所述中央处理器能够处理的显式数据，包括：通过读回与推送线程执行所述读回所述第一渲染目标的所述帧数据，从而将所述帧数据转换为所述中央处理器能够处理的显式数据；所述将所述第一渲染目标的所述帧数据推送给实时通信服务器，包括：通过所述读回与推送线程执行所述将所述第一渲染目标的所述帧数据推送给实时通信服务器。3.根据权利要求1所述的虚幻引擎像素流送方法，其特征在于，所述实时获取渲染完成的帧数据，将所述帧数据存储到第一渲染目标，包括：实时从后缓冲区获取渲染完成的所述帧数据，将所述帧数据进行格式转换并存储到对应格式的第二渲染目标；其中，所述对应格式为所述实时通信服务器可读的显式格式；将所述第二渲染目标中的所述帧数据拷贝到位于所述中央处理器的所述第一渲染目标。4.根据权利要求3所述的虚幻引擎像素流送方法，其特征在于，所述将所述帧数据进行...

【专利技术属性】
技术研发人员：花杰，黄翔，
申请(专利权)人：如你所视北京科技有限公司，
类型：发明
国别省市：