【技术实现步骤摘要】
【国外来华专利技术】用于视频译码的同时定位与地图构建本申请案主张在2014年9月9日提出申请的美国临时申请案62/048,041的权益，所述美国临时申请案的全部内容以引用的方式并入本文中。
本专利技术涉及视频译码。
技术介绍
数字视频能力可并入到广泛范围的装置中，包含数字电视、数字直播系统、无线广播系统、个人数字助理(PDA)、膝上型或桌上型计算机、平板计算机、电子书阅读器、数字摄像机、数字记录装置、数字媒体播放器、视频游戏装置、视频游戏控制台、蜂窝式或卫星无线电电话、所谓“智能电话”、视频电话会议装置、视频流式处理装置及其类似者。数字视频装置实施视频译码技术，例如由MPEG-2、MPEG-4、ITU-TH.263、ITU-TH.264/MPEG-4第10部分、高级视频译码(AVC)、目前在研发中的高效率视频译码(HEVC)标准及此些标准的扩展所定义的标准中所描述之那些技术。视频装置可通过实施此些视频译码技术而更高效地发射、接收、编码、解码及/或存储数字视频信息。
技术实现思路
本专利技术描述利用当前图像及场景结构图...
【技术保护点】
1.一种解码视频数据的方法，所述方法包括：/n基于复合图像及场景结构图而产生合成图像，其中所述复合图像是由先前经解码的一或多个图像构造，其中所述场景结构图包括所述视频数据的当前图像的场景结构图或先前经解码的所述视频数据的图像的场景结构图，其中所述场景结构图包含所述当前图像或先前经解码的所述图像内的三维点的坐标值，所述三维点的坐标值指示所述点的位置和相对深度，其中产生所述合成图像包括利用所述当前图像的摄像机位置及定向信息来渲染所述合成图像，使得所述合成图像和所述当前图像的摄像机位置及定向相同，且其中产生所述合成图像进一步包括：/n互连所述场景结构图的点以形成代理几何结构；/n...
【技术特征摘要】
【国外来华专利技术】20140909 US 62/048,041;20150903 US 14/845,0761.一种解码视频数据的方法，所述方法包括：
基于复合图像及场景结构图而产生合成图像，其中所述复合图像是由先前经解码的一或多个图像构造，其中所述场景结构图包括所述视频数据的当前图像的场景结构图或先前经解码的所述视频数据的图像的场景结构图，其中所述场景结构图包含所述当前图像或先前经解码的所述图像内的三维点的坐标值，所述三维点的坐标值指示所述点的位置和相对深度，其中产生所述合成图像包括利用所述当前图像的摄像机位置及定向信息来渲染所述合成图像，使得所述合成图像和所述当前图像的摄像机位置及定向相同，且其中产生所述合成图像进一步包括：
互连所述场景结构图的点以形成代理几何结构；
将所述复合图像纹理映射到所述代理几何结构以形成基于图像的模型；及
渲染所述基于图像的模型以产生所述合成图像；
确定残差图像，其中所述残差图像指示所述当前图像与所述合成图像之间的差异，且其中确定所述残差图像包括基于包括背景静态部分的所述当前图像的一或多个部分来确定所述残差图像；及
基于所述合成图像及所述残差图像而重构所述当前图像。
2.根据权利要求1所述的方法，其中确定所述残差图像包括：接收所述当前图像的所述残差图像。
3.根据权利要求1所述的方法，其中纹理映射包括：基于一或多个先前经解码图像的摄像机位置及定向信息而将所述复合图像纹理映射到所述代理几何结构。
4.根据权利要求1所述的方法，其进一步包括：
接收所述当前图像的所述场景结构图的信息或指示所述当前图像的所述场景结构图与先前经解码的所述图像的所述场景结构图之间的差异的信息中的一者；及
基于所述所接收信息而产生所述场景结构图，
其中产生所述合成图像包括：基于所述复合图像及所述所产生场景结构图而产生所述合成图像。
5.根据权利要求1所述的方法，其进一步包括：
接收关于用于构造所述复合图像的所述一或多个先前经解码图像及所述当前图像的摄像机位置及摄像机定向中的一者或两者，
其中产生所述合成图像包括：基于所述一或多个先前经解码图像及所述当前图像的所述摄像机位置及所述摄像机定向中的一者或两者而产生所述合成图像。
6.一种编码视频数据的方法，所述方法包括：
基于复合图像及场景结构图而产生合成图像，其中所述复合图像是由先前经编码的一或多个图像构造，其中所述场景结构图包括所述视频数据的当前图像的场景结构图或先前经编码的所述视频数据的图像的场景结构图，其中所述场景结构图包含所述当前图像或先前经编码的所述图像内的三维点的坐标值，所述三维点的坐标值指示所述点的位置和相对深度，其中产生所述合成图像包括利用所述当前图像的摄像机位置及定向信息来渲染所述合成图像，使得所述合成图像和所述当前图像的摄像机位置及定向相同，且其中产生所述合成图像进一步包括：
互连所述场景结构图的点以形成代理几何结构；
将所述复合图像纹理映射到所述代理几何结构以形成基于图像的模型；及
渲染所述基于图像的模型以产生所述合成图像；
基于所述合成图像及所述当前图像而确定残差图像，其中所述残差图像指示所述当前图像与所述合成图像之间的差异，且其中确定所述残差图像包括基于包括背景静态部分的所述当前图像的一或多个部分来确定所述残差图像；及
输出指示所述残差图像的信息以编码所述视频数据的所述当前图像。
7.根据权利要求6所述的方法，其进一步包括：
确定关于用于构造所述复合图像的所述一或多个先前经编码图像的摄像机位置及定向信息及关于所述当前图像的摄像机位置及定向信息，
其中纹理映射包括：基于所述一或多个先前经编码图像的所述摄像机位置及定向信息而将所述复合图像纹理映射到所述代理几何结构。
8.根据权利要求7所述的方法，其进一步包括：
利用同时定位与地图构建SLAM技术确定所述当前图像的所述摄像机位置，
其中确定关于所述一或多个先前经编码图像的所述摄像机位置包括：利用所述SLAM技术来确定关于所述一或多个先前经编码图像的所述摄像机位置。
9.根据权利要求6所述的方法，其进一步包括：
利用同时定位与地图构建SLAM技术来产生所述场景结构图。
10.根据权利要求6所述的方法，其进一步包括：
确定所述当前图像的所述场景结构图的信息或指示所述当前图像的所述场景结构图与先前经编码的所述图像的所述场景结构图之间的差异的信息中的一者；及
输出所述经确定信息。
11.根据权利要求6所述的方法，其中所述合成图像包括第一合成图像，所述方法进一步包括：
输出关于用于构造所述复合图像的所述一或多个先前经编码图像及关于所述当前图像的摄像机位置及摄像机定向中的一者或两者，其中所述摄像机位置及所述摄像机定向中的所述一者或两者由解码器处理器用于产生与所述第一合成图像相同的第二合成图像。
12.根据权利要求6所述的方法，其进一步包括：
确定所述当前图像的前景非静态部分及所述当前图像的背景静态部分，
其中输出所述残差图像包括：输出第一层中的所述残差图像，所述第一层不同于包含关于所述当前图像的所述前景非静态部分的残差数据的第二层。...
【专利技术属性】
技术研发人员：菲利普·格拉斯米格，迪特尔·施马尔施蒂格，格哈德·赖特迈尔，
申请(专利权)人：高通股份有限公司，
类型：发明
国别省市：美国;US
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。