一种图像处理方法及装置、计算机可读存储介质，所述图像处理方法包括：显示第i视频帧时，检测到用户的触发操作；响应于所述触发操作，且检测到与云侧设备之间的网络信号质量满足视频帧上报需求时，向所述云侧设备发送第一指示信息，所述第一指示信息用于指示所述云侧设备对第i+1视频帧进行图像渲染处理；接收并显示所述云侧设备发送的经过图像渲染处理的第i+1视频帧。上述方案能够降低云VR装置的MTP时延，减少显示卡顿的情况出现。减少显示卡顿的情况出现。减少显示卡顿的情况出现。
【技术实现步骤摘要】
图像处理方法及装置、计算机可读存储介质
[0001]本专利技术涉及VR
，尤其涉及一种图像处理方法及装置、计算机可读存储介质。
技术介绍
[0002]传统的虚拟现实(Virtual Reality，VR)设备由于运算量大导致头显沉重且功耗大热量高，影响用户体验。
[0003]现有技术中，存在一种VR场景下端云协同的全新模式，由云侧设备对视频帧进行渲染、流化等处理，并将处理结果发送至云VR装置，由云VR装置显示处理结果，在一定程度上降低了云VR装置的重量和功耗。
[0004]然而，由于云侧设备对视频帧进行处理需要一定的时间，且数据在蜂窝网络和无线局域网传输、编解码过程中会存在较长的运动到成像(Motion To Photons，MTP)时延，导致云VR装置的MTP时延较高，显示存在卡顿的现象。
技术实现思路
[0005]本专利技术实施例解决的是云VR装置的MTP时延较高，显示存在卡顿的现象的技术问题。
[0006]为解决上述技术问题，本专利技术实施例提供一种图像处理方法，包括：显示第i视频帧时，检测到用户的触发操作；响应于所述触发操作，且检测到与云侧设备之间的网络信号质量满足视频帧上报需求时，向所述云侧设备发送第一指示信息，所述第一指示信息用于指示所述云侧设备对第i+1视频帧进行图像渲染处理；接收并显示所述云侧设备发送的经过图像渲染处理的第i+1视频帧。
[0007]可选的，所述图像处理方法还包括：在检测到与云侧设备之间的网络信号质量不满足所述视频帧上报需求时，对所述第i+1个视频帧进行图像渲染处理，并显示经过图像渲染处理的第i+1视频帧。
[0008]可选的，在对所述第i+1个视频帧进行图像渲染处理之前，还包括：确定本地负载不大于第一阈值。
[0009]可选的，所述图像处理方法还包括：若确定所述本地负载大于所述第一阈值，扭曲显示所述第i+1视频帧。
[0010]可选的，所述图像处理方法还包括：检测到与云侧设备之间的网络信号质量不满足所述视频帧上报需求时，对第一视频帧集合中的第i视频帧进行图像渲染处理；若第i+1视频帧位于第二视频帧集合中，则向所述云侧设备发送第二指示信息，所述第二指示信息用于指示所述云侧设备对第i+1视频帧及其之后的M
‑
1个视频帧进行图像渲染处理；接收并显示所述云侧设备发送的经过图像渲染处理的第i+1帧及其之后的M
‑
1个视频帧；若第i+1视频帧位于第一视频帧集合中，则对所述第i+1视频帧进行图像渲染处理并显示；所述第一视频帧集合包括本地执行图像渲染处理的视频帧，所述第二视频帧集合包括由所述云侧设
备执行图像渲染处理的视频帧。
[0011]可选的，所述第一视频帧集合与所述第二视频帧集合中的视频帧为预先分配的。
[0012]可选的，根据预设的调整条件，对所述第一视频帧集合与所述第二视频帧集合中的视频帧数目进行调整；所述预设的调整条件包括如下至少一种：与所述云侧设备之间的信道质量、网络服务质量、流量资费信息以及本地算力。
[0013]本专利技术实施例还提供了另一种图像处理方法，包括：显示第i视频帧时，检测到用户的触发操作；响应于所述触发操作，根据流量资费信息以及本地算力，确定本地对第i+1视频帧进行第一图像渲染处理，以及确定云侧设备对所述第i+1视频帧进行第二图像渲染处理，并向所述云侧设备发送指示对所述第i+1视频帧进行第二图像渲染处理的第三指示信息；对所述第i+1视频帧进行第一图像渲染处理，并接收所述云侧设备发送的经过第二图像渲染处理的第i+1视频帧；对经过第一图像渲染处理的第i+1视频帧与经过第二图像渲染处理的第i+1视频帧进行合并，并显示合并后的第i+1视频帧；所述第一图像渲染处理与所述第二图像渲染处理为丰富细节模型处理与基本细节模型处理中一种。
[0014]可选的，所述确定本地对第i+1视频帧进行第一图像渲染处理，以及确定云侧设备对所述第i+1视频帧进行第二图像渲染处理，包括：若所述流量资费信息对应的流量资费未达到预定资费值，且所述本地算力低于预设阈值，则确定所述第一图像渲染处理为丰富细节模型处理，所述第二图像渲染处理为丰富细节模型处理；若所述流量资费信息对应的流量资费未达到预定资费值，且所述本地算力高于预设阈值，则确定所述第一图像渲染处理为基本细节模型处理，所述第二图像渲染处理为丰富细节模型处理；若所述流量资费信息对应的流量资费达到所述预定资费值，且所述本地算力低于所述预设阈值，则确定所述第一图像渲染处理为丰富细节模型处理，所述第二图像渲染处理为基本细节模型处理；若所述流量资费信息对应的流量资费达到所述预定资费值，且所述本地算力高于所述预设阈值，则确定所述第一图像渲染处理为基本细节模型处理，所述第二图像渲染处理为基本细节模型处理。
[0015]可选的，所述图像处理方法还包括：若未接收到所述合并后的第i+1视频帧，则扭曲显示所述第i+1视频帧。
[0016]本专利技术实施例还提供了一种图像检测装置，包括：第一检测单元，用于显示第i视频帧时，检测用户的触发操作；第一发送单元，用于响应于所述触发操作，且检测到与云侧设备之间的网络信号质量满足视频帧上报需求时，向所述云侧设备发送第一指示信息，所述第一指示信息用于指示所述云侧设备对第i+1视频帧进行图像渲染处理；第一接收单元，用于接收并显示所述云侧设备发送的经过图像渲染处理的第i+1视频帧。
[0017]本专利技术实施例还提供了另一种图像检测装置，包括：第二检测单元，用于显示第i视频帧时，检测用户的触发操作；第一确定单元，用于响应于所述触发操作，根据流量资费信息以及本地算力，确定本地对第i+1视频帧进行第一图像渲染处理，以及确定云侧设备对所述第i+1视频帧进行第二图像渲染处理；第二发送单元，用于向所述云侧设备发送指示对所述第i+1视频帧进行第二图像渲染处理的第三指示信息；第一图像处理单元，用于对所述第i+1视频帧进行第一图像渲染处理；第二接收单元，用于接收所述云侧设备发送的经过第二图像渲染处理的第i+1视频帧；合并单元，用于对经过第一图像渲染处理的第i+1视频帧与经过第二图像渲染处理的第i+1视频帧进行合并，并显示合并后的第i+1视频帧；所述第
一图像渲染处理与所述第二图像渲染处理为丰富细节模型处理与基本细节模型处理中一种。
[0018]本专利技术实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质为非易失性存储介质或非瞬态存储介质，其上存储有计算机程序，所述计算机程序被处理器运行时执行上述任一种所述的图像处理方法的步骤。
[0019]本专利技术实施例还提供了另一种图像处理装置，包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，所述处理器运行所述计算机程序时执行上述任一种所述的图像处理方法的步骤。
[0020]与现有技术相比，本专利技术实施例的技术方案具有以下有益效果：
[0021]当检测到用户的触发操作时，若检测到与云侧设备之间的网络信号质量较优，则由云侧设备对第i+1视频帧本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：显示第i视频帧时，检测到用户的触发操作；响应于所述触发操作，且检测到与云侧设备之间的网络信号质量满足视频帧上报需求时，向所述云侧设备发送第一指示信息，所述第一指示信息用于指示所述云侧设备对第i+1视频帧进行图像渲染处理；接收并显示所述云侧设备发送的经过图像渲染处理的第i+1视频帧。2.如权利要求1所述的图像处理方法，其特征在于，还包括：在检测到与云侧设备之间的网络信号质量不满足所述视频帧上报需求时，对所述第i+1个视频帧进行图像渲染处理，并显示经过图像渲染处理的第i+1视频帧。3.如权利要求2所述的图像处理方法，其特征在于，在对所述第i+1个视频帧进行图像渲染处理之前，还包括：确定本地负载不大于第一阈值。4.如权利要求3所述的图像处理方法，其特征在于，还包括：若确定所述本地负载大于所述第一阈值，扭曲显示所述第i+1视频帧。5.如权利要求1所述的图像处理方法，其特征在于，还包括：检测到与云侧设备之间的网络信号质量不满足所述视频帧上报需求时，对第一视频帧集合中的第i视频帧进行图像渲染处理；若第i+1视频帧位于第二视频帧集合中，则向所述云侧设备发送第二指示信息，所述第二指示信息用于指示所述云侧设备对第i+1视频帧及其之后的M
‑
1个视频帧进行图像渲染处理；接收并显示所述云侧设备发送的经过图像渲染处理的第i+1帧及其之后的M
‑
1个视频帧；若第i+1视频帧位于第一视频帧集合中，则对所述第i+1视频帧进行图像渲染处理并显示；所述第一视频帧集合包括本地执行图像渲染处理的视频帧，所述第二视频帧集合包括由所述云侧设备执行图像渲染处理的视频帧。6.如权利要求5所述的图像处理方法，其特征在于，所述第一视频帧集合与所述第二视频帧集合中的视频帧为预先分配的。7.如权利要求5所述的图像处理方法，其特征在于，根据预设的调整条件，对所述第一视频帧集合与所述第二视频帧集合中的视频帧数目进行调整；所述预设的调整条件包括如下至少一种：与所述云侧设备之间的信道质量、网络服务质量、流量资费信息以及本地算力。8.一种图像处理方法，其特征在于，包括：显示第i视频帧时，检测到用户的触发操作；响应于所述触发操作，根据流量资费信息以及本地算力，确定本地对第i+1视频帧进行第一图像渲染处理，以及确定云侧设备对所述第i+1视频帧进行第二图像渲染处理，并向所述云侧设备发送指示对所述第i+1视频帧进行第二图像渲染处理的第三指示信息；对所述第i+1视频帧进行第一图像渲染处理，并接收所述云侧设备发送的经过第二图像渲染处理的第i+1视频帧；对经过第一图像渲染处理的第i+1视频帧与经过第二图像渲染处理的第i+1视频帧进
行合并，并显示合并后的第i+1视频帧；所述第一图像渲染处理与所述第二图像渲染处理为丰富细节模型处理与基本细节模型处理中一种。9.如权利要求8所述的图像处...
【专利技术属性】
技术研发人员：李丛蓉，吕培，朱勇旭，赵磊，陈定云，张伟强，
申请(专利权)人：展讯通信上海有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。