三维视频通信方法及系统、电子装置、服务器和可读存储介质制造方法及图纸

本发明专利技术公开了一种三维视频通信方法、三维视频通信系统、电子装置、服务器和非易失性计算机可读存储介质。三维视频通信方法包括获取当前场景的多帧二维图像和/或多帧深度图像，传送多帧二维图像和/或多帧深度图像至服务器，服务器用于根据多帧二维图像和/或多帧深度图像生成多帧三维图像，并将多帧三维图像传送至终端设备。本发明专利技术实施方式的三维视频通信方法、三维视频通信系统、电子装置、服务器和非易失性计算机可读存储介质可实现三维视频的传输，终端设备可观看到三维的立体的视频效果，用户使用体验更好，且三维图像的计算由服务器来执行，减小了的电子装置的数据处理量和功耗，也减少了图像处理的时间，有利于缩短视频通信过程中的时延。

【技术实现步骤摘要】
三维视频通信方法及系统、电子装置、服务器和可读存储介质
本专利技术涉及通信
，特别涉及一种三维视频通信方法、三维视频通信系统、电子装置、服务器和非易失性计算机可读存储介质。
技术介绍
目前，2D视频越来越广泛地应用在人们的生活与工作中，例如，2D视频播放、2D视频通话、2D视频会议等等，然而，尽管2D视频能够呈现给人们足够的画面感，但由于组成2D视频的多帧图片均为二维图片，不包含深度信息，无法实现立体呈现。
技术实现思路
本专利技术的实施例提供了一种三维视频通信方法、三维视频通信系统、电子装置、服务器和非易失性计算机可读存储介质。本专利技术实施方式的三维视频通信方法，用于电子装置，所述电子装置通过无线通信方式与服务器通信，所述三维视频通信方法包括：获取当前场景的多帧二维图像和/或多帧深度图像；和传送多帧所述二维图像和/或多帧所述深度图像至所述服务器，所述服务器用于根据多帧所述二维图像和/或多帧所述深度图像生成多帧三维图像，并将多帧所述三维图像传送至终端设备。本专利技术实施方式的三维视频通本文档来自技高网...

【技术保护点】
1.一种三维视频通信方法，用于电子装置，所述电子装置通过无线通信方式与服务器通信，其特征在于，所述三维视频通信方法包括：/n获取当前场景的多帧二维图像和多帧深度图像；和/n传送多帧所述二维图像和多帧所述深度图像至所述服务器，所述服务器用于根据多帧所述二维图像和多帧所述深度图像生成多帧三维图像，并将多帧所述三维图像传送至终端设备；/n所述三维视频通信方法还包括：/n确定所述电子装置所处的应用场景；/n根据确定的所述应用场景调整对应的压缩比例；/n根据所述压缩比例压缩多帧所述二维图像和多帧所述深度图像；/n所述传送多帧所述二维图像和多帧所述深度图像至所述服务器的步骤包括：/n传送压缩后的多帧所述二...

【技术特征摘要】
1.一种三维视频通信方法，用于电子装置，所述电子装置通过无线通信方式与服务器通信，其特征在于，所述三维视频通信方法包括：
获取当前场景的多帧二维图像和多帧深度图像；和
传送多帧所述二维图像和多帧所述深度图像至所述服务器，所述服务器用于根据多帧所述二维图像和多帧所述深度图像生成多帧三维图像，并将多帧所述三维图像传送至终端设备；
所述三维视频通信方法还包括：
确定所述电子装置所处的应用场景；
根据确定的所述应用场景调整对应的压缩比例；
根据所述压缩比例压缩多帧所述二维图像和多帧所述深度图像；
所述传送多帧所述二维图像和多帧所述深度图像至所述服务器的步骤包括：
传送压缩后的多帧所述二维图像和多帧所述深度图像至所述服务器；根据确定的所述应用场景调整对应的所述压缩比例，包括：
当传送的多帧二维图像和多帧深度图像用于视频通话的应用场景时，调高所述压缩比例；
当传送的多帧二维图像和多帧深度图像用于全息投影的应用场景时，调低所述压缩比例；
或，所述三维视频通信方法包括：
获取当前场景的多帧二维图像；和
传送多帧所述二维图像至所述服务器，所述服务器用于根据多帧所述二维图像生成多帧三维图像，并将多帧所述三维图像传送至终端设备；
所述三维视频通信方法还包括：
确定所述电子装置所处的应用场景；
根据确定的所述应用场景调整对应的压缩比例；
根据所述压缩比例压缩多帧所述二维图像；
所述传送多帧所述二维图像至所述服务器的步骤包括：
传送压缩后的多帧所述二维图像至所述服务器；
根据确定的所述应用场景调整对应的所述压缩比例，包括：
当传送的多帧二维图像用于视频通话的应用场景时，调高所述压缩比例；
当传送的多帧二维图像用于全息投影的应用场景时，调低所述压缩比例。


2.根据权利要求1所述的三维视频通信方法，其特征在于，所述电子装置包括结构光投射模组，所述深度图像通过所述结构光投射模组获取得到；和/或
所述电子装置包括两个摄像头，多帧所述二维图像包括一一对应的多帧第一二维图像和多帧第二二维图像，多帧所述第一二维图像和多帧所述第二二维图像分别由两个所述摄像头获取得到；和/或
所述电子装置包括TOF传感器模组，所述深度图像通过所述TOF传感器模组获取得到。


3.根据权利要求1所述的三维视频通信方法，其特征在于，所述电子装置通过WIFI、4G或5G中的至少一种无线通信方式传送多帧所述二维图像和多帧所述深度图像至所述服务器；
或，所述电子装置通过WIFI、4G或5G中的至少一种无线通信方式传送多帧所述二维图像至所述服务器。


4.根据权利要求3所述的三维视频通信方法，其特征在于，多帧所述二维图像和多帧所述深度图像的传输路线为：
所述电子装置通过无线通信方式传送多帧所述二维图像和多帧所述深度图像至第一基站；
所述第一基站通过有线通信方式传送多帧所述二维图像和多帧所述深度图像至核心网；
所述核心网通过有线通信方式传送多帧所述二维图像和多帧所述深度图像至第二基站；
所述第二基站通过无线通信方式传送多帧所述二维图像和多帧所述深度图像至所述服务器；
或，多帧所述二维图像的传输路线为：
所述电子装置通过无线通信方式传送多帧所述二维图像至第一基站；
所述第一基站通过有线通信方式传送多帧所述二维图像至核心网；
所述核心网通过有线通信方式传送多帧所述二维图像至第二基站；
所述第二基站通过无线通信方式传送多帧所述二维图像至所述服务器。


5.根据权利要求3所述的三维视频通信方法，其特征在于，多帧所述二维图像和多帧所述深度图像的传输路线为：
所述电子装置通过无线通信方式传送多帧所述二维图像和多帧所述深度图像至第一基站；
所述第一基站通过有线通信方式传送多帧所述二维图像和多帧所述深度图像至核心网；
所述核心网通过有线通信方式传送多帧所述二维图像和多帧所述深度图像至所述服务器；
或，多帧所述二维图像的传输路线为：
所述电子装置通过无线通信方式传送多帧所述二维图像至第一基站；
所述第一基站通过有线通信方式传送多帧所述二维图像至核心网；
所述核心网通过有线通信方式传送多帧所述二维图像至所述服务器。


6.一种三维视频通信方法，用于服务器，所述服务器通过无线通信方式与电子装置及终端设备通信，其特征在于，所述三维视频通信方法包括：
接收所述电子装置传送的多帧二维图像和多帧深度图像；
根据多帧所述二维图像和多帧所述深度图像生成多帧三维图像；和
传送多帧所述三维图像至所述终端设备；
所述接收所述电子装置传送的多帧二维图像和多帧深度图像的步骤包括：
接收所述电子装置传送的根据压缩比例压缩后的多帧所述二维图像和多帧所述深度图像；
所述三维视频通信方法还包括：
解压压缩后的多帧所述二维图像和多帧所述深度图像；
所述根据多帧所述二维图像和多帧所述深度图像生成多帧三维图像的步骤包括：
根据解压后的多帧所述二维图像和多帧所述深度图像生成多帧三维图像；所述压缩比例由所述电子装置根据所处的应用场景调整，当传送的多帧二维图像和多帧深度图像用于视频通话的应用场景时，所述压缩比例由所述电子装置调高；当传送的多帧二维图像和多帧深度图像用于全息投影的应用场景时，所述压缩比例由所述电子装置调低；
或，所述三维视频通信方法包括：
接收所述电子装置传送的多帧二维图像；
根据多帧所述二维图像生成多帧三维图像；和
传送多帧所述三维图像至所述终端设备；
所述接收所述电子装置传送的多帧二维图像的步骤包括：
接收所述电子装置传送的根据压缩比例压缩后的多帧所述二维图像；
所述三维视频通信方法还包括：
解压压缩后的多帧所述二维图像；
所述根据多帧所述二维图像生成多帧三维图像的步骤包括：
根据解压后的多帧所述二维图像生成多帧三维图像；
所述压缩比例由所述电子装置根据所处的应用场景调整，当传送的多帧二维图像用于视频通话的应用场景时，所述压缩比例由所述电子装置调高；当传送的多帧二维图像用于全息投影的应用场景时，所述压缩比例由所述电子装置调低。


7.根据权利要求6所述的三维视频通信方法，其特征在于，所述服务器通过WIFI、4G或5G中的至少一种无线通信方式接收所述电子装置传送的多帧所述二维图像和多帧所述深度图像；
或，所述服务器通过WIFI、4G或5G中的至少一种无线通信方式接收所述电子装置传送的多帧所述二维图像；
所述服务器通过WIFI、4G或5G中的至少一种无线通信方式和/或有线通信方式传送多帧所述三维图像至所述终端设备。


8.根据权利要求7所述的三维视频通信方法，其特征在于，多帧所述二维图像和多帧所述深度图像的传输路线为：
所述电子装置通过无线通信方式传送多帧所述二维图像和多帧所述深度图像至第一基站；
所述第一基站通过有线通信方式传送多帧所述二维图像和多帧所述深度图像至核心网；
所述核心网通过有线通信方式传送多帧所述二维图像和多帧所述深度图像至第二基站；
所述第二基站通过无线通信方式传送多帧所述二维图像和多帧所述深度图像至所述服务器；
或，多帧所述二维图像的传输路线为：
所述电子装置通过无线通信方式传送多帧所述二维图像至第一基站；
所述第一基站通过有线通信方式传送多帧所述二维图像至核心网；
所述核心网通过有线通信方式传送多帧所述二维图像至第二基站；
所述第二基站通过无线通信方式传送多帧所述二维图像至所述服务器；
多帧所述三维图像的传输路线为：
所述服务器通过无线通信方式和/或有线通信方式传送多帧所述三维图像至所述终端设备。


9.根据权利要求7所述的三维视频通信方法，其特征在于，多帧所述二维图像和多帧所述深度图像的传输路线为：
所述电子装置通过无线通信方式传送多帧所述二维图像和多帧所述深度图像至第一基站；
所述第一基站通过有线通信方式传送多帧所述二维图像和多帧所述深度图像至核心网；
所述核心网通过有线通信方式传送多帧所述二维图像和多帧所述深度图像至所述服务器；
或，多帧所述二维图像的传输路线为：
所述电子装置通过无线通信方式传送多帧所述二维图像至第一基站；
所述第一基站通过有线通信方式传送多帧所述二维图像至核心网；
所述核心网通过有线通信方式传送多帧所述二维图像至所述服务器；
多帧所述三维图像的传输路线为：
所述服务器通过有线通信方式传送多帧所述三维图像至所述核心网；
所述核心网通过有线通信方式传送多帧所述三维图像至第二基站；
所述第二基站通过无线通信方式传送多帧所述三维图像至所述终端设备。


10.一种三维视频通信方法，用于三维视频通信系统，其特征在于，所述三维视频通信系统包括电子装置、服务器和终端设备，所述三维视频通信方法包括：
所述电子装置获取当前场景的多帧二维图像和多帧深度图像；
所述电子装置传送多帧所述二维图像和多帧所述深度图像至所述服务器；
所述服务器接收所述电子装置传送的多帧所述二维图像和多帧所述深度图像；
所述服务器根据多帧所述二维图像和多帧所述深度图像生成多帧三维图像；和
所述服务器传送多帧所述三维图像至所述终端设备；
所述三维视频通信方法还包括：
所述电子装置确定所述电子装置所处的应用场景；
所述电子装置根据确定的所述应用场景调整对应的压缩比例；
所述电子装置根据所述压缩比例压缩多帧所述二维图像和多帧所述深度图像；
所述电子装置传送多帧所述二维图像和多帧所述深度图像至所述服务器的步骤包括：
所述电子装置传送压缩后的多帧所述二维图像和多帧所述深度图像至所述服务器；
所述服务器接收所述电子装置传送的多帧所述二维图像和多帧所述深度图像的步骤包括：
所述服务器接收所述电子装置传送的根据所述压缩比例压缩后的多帧所述二维图像和多帧所述深度图像；
所述三维视频通信方法还包括：
所述服务器解压压缩后的多帧所述二维图像和多帧所述深度图像；
所述服务器根据多帧所述二维图像和多帧所述深度图像生成多帧三维图像的步骤包括：
所述服务器根据解压后的多帧所述二维图像和多帧所述深度图像生成多帧三维图像；
当传送的多帧二维图像和多帧深度图像用于视频通话的应用场景时，所述电子装置调高所述压缩比例；当传送的多帧二维图像和多帧深度图像用于全息投影的应用场景时，所述电子装置调低所述压缩比例
或，所述三维视频通信方法包括：
所述电子装置获取当前场景的多帧二维图像；
所述电子装置传送多帧所述二维图像至所述服务器；
所述服务器接收所述电子装置传送的多帧所述二维图像；
所述服务器根据多帧所述二维图像生成多帧三维图像；和
所述服务器传送多帧所述三维图像至所述终端设备；
所述三维视频通信方法还包括：
所述电子装置确定所述电子装置所处的应用场景；
所述电子装置根据确定的所述应用场景调整对应的压缩比例；
所述电子装置根据所述压缩比例压缩多帧所述二维图像；
所述电子装置传送多帧所述二维图像至所述服务器的步骤包括：
所述电子装置传送压缩后的多帧所述二维图像至所述服务器；
所述服务器接收所述电子装置传送的多帧所述二维图像的步骤包括：
所述服务器接收所述电子装置传送的根据所述压缩比例压缩后的多帧所述二维图像；
所述三维视频通信方法还包括：
所述服务器解压压缩后的多帧所述二维图像；
所述服务器根据多帧所述二维图像生成多帧三维图像的步骤包括：
所述服务器根据解压后的多帧所述二维图像生成多帧三维图像；
当传送的多帧二维图像用于视频通话的应用场景时，所述电子装置调高所述压缩比例；当传送的多帧二维图像用于全息投影的应用场景时，所述电子装置调低所述压缩比例。


11.根据权利要求10所述的三维视频通信方法，其特征在于，所述电子装置包括结构光投射模组，所述深度图像通过所述结构光投射模组获取得到；和/或
所述电子装置包括两个摄像头，多帧所述二维图像包括一一对应的多帧第一二维图像和多帧第二二维图像，多帧所述第一二维图像和多帧所述第二二维图像分别由两个所述摄像头获取得到；和/或
所述电子装置包括TOF传感器模组，所述深度图像通过所述TOF传感器模组获取得到。


12.根据权利要求10所述的三维视频通信方法，其特征在于，所述电子装置通过WIFI、4G或5G中的至少一种无线通信方式传送多帧所述二维图像和多帧所述深度图像至所述服务器；
或，所述电子装置通过WIFI、4G或5G中的至少一种无线通信方式传送多帧所述二维图像至所述服务器；
所述服务器通过WIFI、4G或5G中的至少一种无线通信方式传送多帧所述三维图像至所述终端设备。


13.根据权利要求12所述的三维视频通信方法，其特征在于，多帧所述二维图像和多帧所述深度图像的传输路线为：
所述电子装置通过无线通信方式传送多帧所述二维图像和多帧所述深度图像至第一基站；
所述第一基站通过有线通信方式传送多帧所述二维图像和多帧所述深度图像至核心网；
所述核心网通过有线通信方式传送多帧所述二维图像和多帧所述深度图像至第二基站；
所述第二基站通过无线通信方式传送多帧所述二维图像和多帧所述深度图像至所述服务器；
或，多帧所述二维图像的传输路线为：
所述电子装置通过无线通信方式传送多帧所述二维图像至第一基站；
所述第一基站通过有线通信方式传送多帧所述二维图像至核心网；
所述核心网通过有线通信方式传送多帧所述二维图像至第二基站；
所述第二基站通过无线通信方式传送多帧所述二维图像至所述服务器；
多帧所述三维图像的传输路线为：
所述服务器通过无线通信方式和/或有线通信方式传输多帧所述三维图像至所述终端设备。


14.根据权利要求12所述的三维视频通信方法，其特征在于，多帧所述二维图像和多帧所述深度图像的传输路线为：
所述电子装置通过无线通信方式传送多帧所述二维图像和多帧所述深度图像至第一基站；
所述第一基站通过有线通信方式传送多帧所述二维图像和多帧所述深度图像至核心网；
所述核心网通过有线通信方式传送多帧所述二维图像和多帧所述深度图像至所述服务器；
或，多帧所述二维图像的传输路线为：
所述电子装置通过无线通信方式传送多帧所述二维图像至第一基站；
所述第一基站通过有线通信方式传送多帧所述二维图像至核心网；
所述核心网通过有线通信方式传送多帧所述二维图像至所述服务器；
多帧所述三维图像的传输路线为：
所述服务器通过有线通信方式传送多帧所述三维图像至所述核心网；
所述核心网通过有线通信方式传送多帧所述三维图像至第二基站；
所述第二基站通过无线通信方式传送多帧所述三维图像至所述终端设备。


15.一种电子装置，所述电子装置通过无线通信方式与服务器通信，其特征在于，所述电子装置包括：
获取模块，所述获取模块用于获取当前场景的多帧二维图像和多帧深度图像；
传送模块，所述传送模块用于传送多帧所述二维图像和多帧所述深度图像至所述服务器，所述服务器用于根据多帧所述二维图像和多帧所述深度图像生成多帧三维图像，并将多帧所述三维图像传送至终端设备；
所述传送模块用于确定所述电子装置所处的应用场景；根据确定的所述应用场景调整对应的压缩比例；根据所述压缩比例压缩多帧所述二维图像和多帧所述深度图像；传送压缩后的多帧所述二维图像和多帧所述深度图像至所述服务器；当传送的多帧二维图像和多帧深度图像用于视频通话的应用场景时，调高所述压缩比例；当传送的多帧二维图像和多帧深度图像用于全息投影的应用场景时，调低所述压缩比例；
或，所述电子装置包括：
获取模块，所述获取模块用于获取当前场景的多帧二维图像；
传送模块，所述传送模块用于传送多帧所述二维图像至所述服务器，所述服务器用于根据多帧所述二维图像生成多帧三维图像，并将多帧所述三维图像传送至终端设备；
所述传送模块用于确定所述电子装置所处的应用场景；根据确定的所述应用场景调整对应的压缩比例；根据所述压缩比例压缩多帧所述二维图像；传送压缩后的多帧所述二维图像至所述服务器；当传送的多帧二维图像用于视频通话的应用场景时，调高所述压缩比例；当传送的多帧二维图像用于全息投影的应用场景时，调低所述压缩比例。


16.一种服务器，所述服务器通过无线通信方式与电子装置及终端设备通信，其特征在于，所述服务器包括：
接收单元，所述接收单元用于接收所述电子装置传送的多帧二维图像和多帧深度图像；
处理单元，所述处理单元用于根据多帧所述二维图像和多帧所述深度图像生成多帧三维图像；和
传送单元，所述传送单元用于传送多帧所述三维图像至所述终端设备；
所述接收单元用于接收所述电子装置传送的根据压缩比例压缩后的多帧所述二维图像和多帧所述深度图像；所述处理单元用于解压压缩后的多帧所述二维图像和多帧所述深度图像；根据解压后的多帧所述二维图像和多帧所述深度图像生成多帧三维图像；所述压缩比例由所述电子装置根据所处的应用场景调整，当传送的多帧二维图像和多帧深度图像用于视频通话的应用场景时，所述压缩比例由所述电子装置调高；当传送的多帧二维图像和多帧深度图像用于全息投影的应用场景时...

【专利技术属性】
技术研发人员：白剑，唐海，张学勇，吕向楠，夏炀，李虎，陈婷，谭国辉，谭正鹏，陈彪，许风华，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：广东;44