用于动态图像虚拟化的系统和方法技术方案

一种动态图像虚拟化系统和方法，被配置为利用AI模型以对至少一个输入图像进行降低延迟的实时预测处理，其中，所述预测处理被指定为创建自由视点3D外推输出动态图像，所述自由视点3D外推输出动态图像是针对用户的偏好或需要预先定制的并且与所述至少一个输入图像相比包括较多视觉数据。相比包括较多视觉数据。相比包括较多视觉数据。

【技术实现步骤摘要】
【国外来华专利技术】用于动态图像虚拟化的系统和方法


[0001]本专利技术总体涉及图像虚拟化系统，具体涉及用于产生动态图像并包括预测能力的低延迟图像虚拟化系统。

技术介绍

[0002]图像虚拟化系统可用于许多目的，例如，可用于从不同视角对对象或周围环境进行可视化，或提供沉浸感以使用户能够探索感兴趣的环境或对象。为了实现这些能力，可视化系统优选地需要提供具有最小延迟的恒定操作，同时优选地使用最少的计算要求和资源。例如，需要一种被配置成例如通过使用增强现实(AR)或混合现实(MR)来提供沉浸式体验的虚拟化系统，来以最小的响应延迟提供用户方位(bearing)实时监测。这些能力在非受控网络环境中难以达到。
[0003]已知的虚拟化系统受到计算资源有限的困难，因此，与剧情长片或计算机游戏的质量相比，向这种系统的用户显示的3D内容的视觉质量相对较差。
[0004]造成上述困难的一个原因是：图像文件可能非常大，并且通常在大小上可以从几兆字节到几千兆字节，结果，在具有有限带宽的网络上分发可能是不可行的。即使在没有实时要求的情况下，用于传送图像文件的时间也可能太长本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种动态图像虚拟化系统，所述系统包括：(i)控制器，所述控制器被配置成通过使用被训练成执行数据获取预测的AI模型来对至少一个输入图像执行数字图像处理以产生外推输出动态图像，其中，所述至少一个输入图像是通过静态2D计算机生成影像CGI来生成的；以及(ii)至少一个显示单元，所述至少一个显示单元被配置为向至少一个用户呈现所述外推输出动态图像，其中，所述至少一个输入图像是离线生成的，并且所述外推输出动态图像是自由视点3D图像，并且其中，所述数据获取预测处理具有降低的延迟并且造成产生所述外推输出动态图像，所述外推输出动态图像与所述至少一个输入图像相比包括新颖的图像以及新颖的多方向和图像场景参数。2.根据权利要求1所述的系统，其中，所述至少一个输入图像被细分成多个图像拼块。3.根据权利要求1所述的系统，其中，所述降低延迟的预测处理是使用内容传递网络CDN来进行的。4.根据权利要求1所述的系统，其中，所述降低延迟的预测处理被配置为通过计算和生成基于所述至少一个输入图像的后续未来拼块来产生外推输出动态图像，其中，所述外推输出动态图像与所述至少一个输入图像相比包括新颖的图像以及新颖的多方向和图像场景参数。5.根据权利要求4所述的系统，其中，各个拼块包括视觉数据阵列。6.根据权利要求5所述的系统，其中，各个拼块的所述视觉数据阵列是经压缩的。7.根据权利要求4所述的系统，其中，各个拼块是多分辨率拼块。8.根据权利要求4所述的系统，其中，各个拼块是多视图压缩拼块。9.根据权利要求4所述的系统，其中，各个拼块是时间压缩的。10.根据权利要求4所述的系统，其中，各个拼块与至少一个其它拼块组合以创建包括所组合拼块的视觉数据的较大拼块。11.根据权利要求4所述的系统，其中，所述外推输出动态图像包括覆盖层的无限制堆和分辨率金字塔。12.根据权利要求1所述的系统，其中，所述外推输出动态图像向所述AI模型提供输入，所述AI模型被训练成使用DNN进行图像质量增强。13.根据权利要求1所述的系统，其中，使用超分辨率SP技术在所述外推输出动态图像上执行另外的图像质量增强。14.根据权利要求1所述的系统，其中，所述数字图像处理执行使用所述至少一个显示单元向所述至少一个用户呈现的以对象为中心的体积内容的流式传输。15.根据权利要求1所述的系统，其中，所述数字图像处理执行使用所述至少一个显示单元向所述至少一个用户呈现的以视图为中心的体积内容的流式传输。16.根据权利要求1所述的系统，其中，所述外推输出动态图像是使用非结构化光场技术来呈现的。17.根据权利要求1所述的系统，其中，所述外推输出动态图像是使用基于广告牌的四边形渲染来呈现的。18.根据权利要求1所述的系统，其中，所述至少一个输入图像通过使用虚拟摄像头的
视图相关重建来创建并随后显示为外推输出动态图像。19.根据权利要求1所述的系统，其中，所述外推输出动态图像显示虚拟化的建筑空间或结构。20.根据权利要求1所述的系统，其中，所述外推输出动态图像显示至少一个虚拟化视觉效果。21.根据权利要求1所述的系统，其中，所述至少一个用户的方位由至少一个传感器捕捉，并中继到所述控制器并由所述控制器分析。22.根据权利要求1所述的系统，其中，所述数字图像处理使用多层缓存。23.根据权利要求1所述的系统，其中，能够使用无线网络来中继所述外推输出动态图像。24.根据权利要求1所述的系统，其中，能够使用有线网络来中继所述外推输出动态图像。25.根据权利要求1所述的系统，其中，使用远程流式传输来传送所述外推输出动态图像。26.根据权利要求1所述的系统，其中，所述至少一个显示单元是移动蜂窝设备。27.根据权利要求1所述的系统，其中，所述至少一个显示单元是头...

【专利技术属性】
技术研发人员：K，
申请(专利权)人：宝缇嘉工作室有限公司，
类型：发明
国别省市：