一种基于右视点加深度图的多视点转换二三维视频显示方法技术

本发明专利技术公开了一种基于右视点加深度图的多视点转换二三维视频显示方法，具体步骤如下：通过符合人眼机理的双镜头立体摄像机，产生左右两个视点视频；根据左右视点相关性，经右视点深度图编解码，再经多视点转换产生多视点视频；在二三维可转换液晶透镜阵列显示屏播放。

【技术实现步骤摘要】
【专利说明】法
本专利技术涉及
技术介绍
立体视频系统由于能够提供立体感、视点交互性的全新视觉体验而越来越受到人们的欢迎。现商业化的立体视频技术，有基于红蓝、偏正或快门式的戴眼镜显示技术，和基于多视点视频、多视点加深度图和自由立体视点等显示技术。前者存在观看舒适度和戴眼镜问题；而后者也存在多视点间同步摄像，图像重构质量，多视点视频压缩码率及二三维视频兼容问题。立体视频摄取系统常用的摄取方法是从左右两个视角对同一场景进行拍摄，立体视频摄取系统摄取得到的立体视频包括左右两个视点视频，两个视点视频的图像对之间存在很强的相关性，可通过深度图方法来降低右视点图像的传输码率并保持较高的右视点图像重构质量。但左右两个视点视频的视角很小，只适合小屏视频观看，大屏视频观看还需戴眼镜。通过符合人眼机理的双镜头立体摄像机，产生左右两个视点视频，避免了多视点阵列的摄像同步问题；经右视点深度图编码，解决多视点压缩码率问题，压缩码流可通过卫星、地面播或有线传输；再经右视点深度图解码，并经多视点转换产生多视点视频，建议用28视点(相对最低64视点的自由视点显示技术,28视点视频图像质量,能满足高清电视节目播放)；在二三维可转换液晶透镜阵列显示屏播放，初步解决立体电视观看舒适度及戴眼镜问题，实现兼容二维视频的裸眼立体电视节目播放。
技术实现思路
本专利技术的目的在于提供。本专利技术包括以下特征:专利技术技术方案1.基于右视点加深度图的立体视频编码方法，其具体步骤如下:I)由符合人眼机理的双镜头立体摄像机，产生左右两个视点视频；2)根据左右视点相关性，通过深度图方法，得到原始右视点图像的绘制图像；3)计算原始右视点图像与原始右视点图像的绘制图像的残差图像，并对该残差图像进行预处理；根据设定的编码预测结构对原始左视点图像和预处理后的残差图像进行编码，得到解码后的左视点图像和解码后的残差图像；4)通过深度图方法，得到解码后的右视点图像的绘制图像；根据解码后的根据解码后的右视点图像的绘制图像和解码后的残差图像，得到解码后的右视点图像的重构图像。2.中间虚拟视点的生成，其具体步骤如下:I)对视点深度图，按照中间视点的空间几何关系进行视差分配，形成N+1份视差，作为视点插值的参数；2)利用标准深度图进行虚拟视点生成，通过视点插值生成中间N+1个虚拟视点。3.立体视频显示，其具体步骤如下:生成的多视点码流，通过二三维可转换液晶透镜阵列显示屏的IC控制，实现兼容二维视频的裸眼立体视频的播放。【附图说明】图1是右视点加深度图多视点转换三维显示流程图【具体实施方式】这种基于右视点加深度图的多视点转换二三维视频显示方法，包括如下步骤:I)根据由符合人眼机理的双镜头立体摄像机，产生左右两个视点视频；2)根据左右视点相关性，通过深度图方法，得到原始右视点图像的绘制图像；3)计算原始右视点图像与原始右视点图像的绘制图像的残差图像，并对该残差图像进行预处理；根据设定的编码预测结构对原始左视点图像和预处理后的残差图像进行编码，得到解码后的左视点图像和解码后的残差图像；4)通过深度图方法，得到解码后的右视点图像的绘制图像，根据解码后的根据解码后的右视点图像的绘制图像和解码后的残差图像，得到解码后的右视点图像的重构图像；5)对视点深度图，按照中间视点的空间几何关系进行视差分配，形成N+1份视差，作为视点插值的参数；6)利用标准深度图进行虚拟视点生成，通过视点插值生成中间N+1个虚拟视点；7)生成的多视点码流，通过二三维可转换液晶透镜阵列显示屏的IC控制，实现兼容二维视频的裸眼立体视频的播放。【主权项】1.基于右视点加深度图的立体视频编码方法，其具体步骤如下: 1)由符合人眼机理的双镜头立体摄像机，产生左右两个视点视频； 2)根据左右视点相关性，通过深度图方法，得到原始右视点图像的绘制图像； 3)计算原始右视点图像与原始右视点图像的绘制图像的残差图像，并对该残差图像进行预处理；根据设定的编码预测结构对原始左视点图像和预处理后的残差图像进行编码，得到解码后的左视点图像和解码后的残差图像； 4)通过深度图方法，得到解码后的右视点图像的绘制图像，根据解码后的根据解码后的右视点图像的绘制图像和解码后的残差图像，得到解码后的右视点图像的重构图像。2.中间虚拟视点的生成，其具体步骤如下: 1)对视点深度图，按照中间视点的空间几何关系进行视差分配，形成N+1份视差，作为视点插值的参数； 2)利用标准深度图进行虚拟视点生成，通过视点插值生成中间N+1个虚拟视点。3.二三维视频显示，其具体步骤如下: 生成的多视点码流，通过二三维可转换液晶透镜阵列显示屏的IC控制，实现兼容二维视频的裸眼立体视频的播放。【专利摘要】本专利技术公开了，具体步骤如下：通过符合人眼机理的双镜头立体摄像机，产生左右两个视点视频；根据左右视点相关性，经右视点深度图编解码，再经多视点转换产生多视点视频；在二三维可转换液晶透镜阵列显示屏播放。【IPC分类】H04N13/00, H04N13/04【公开号】CN104954774【申请号】CN201410110833【专利技术人】张军 【申请人】上海京知信息科技有限公司【公开日】2015年9月30日【申请日】2014年3月24日本文档来自技高网...

【技术保护点】
基于右视点加深度图的立体视频编码方法，其具体步骤如下：1)由符合人眼机理的双镜头立体摄像机，产生左右两个视点视频；2)根据左右视点相关性，通过深度图方法，得到原始右视点图像的绘制图像；3)计算原始右视点图像与原始右视点图像的绘制图像的残差图像，并对该残差图像进行预处理；根据设定的编码预测结构对原始左视点图像和预处理后的残差图像进行编码，得到解码后的左视点图像和解码后的残差图像；4)通过深度图方法，得到解码后的右视点图像的绘制图像，根据解码后的根据解码后的右视点图像的绘制图像和解码后的残差图像，得到解码后的右视点图像的重构图像。

【技术特征摘要】

【专利技术属性】
技术研发人员：张军，
申请(专利权)人：上海京知信息科技有限公司，
类型：发明
国别省市：上海;31