【技术实现步骤摘要】
基于成像相关的多焦距光场视频帧内预测方法和装置
本专利技术涉及计算机视觉与数字处理领域,具体涉及一种基于成像相关的多焦距光场视频帧内预测方法。
技术介绍
光场相机是一种能同时捕获光线的强度和角度信息的新型相机,可用于立体显示、三维重建以及虚拟现实等计算机视觉领域,引起了研究人员的广泛关注。为了进一步提升采集的光场质量,研究人员们提出了基于多焦距微透镜阵列的光场相机,可同时对多个场景深度进行聚焦。然而这种新型的相机采集到的光场图像或视频具有比传统光场更为复杂的像素分布结构,同一物体在不同焦距透镜下的像相关性下降,使得用现有的编解码算法和编解码软硬件架构的压缩效率极具下降,也制约着高质量光场内容的进一步发展和应用。因此,研究针对这种新型光场数据的编码技术,寻找针对性的高效压缩方法成为由平面多媒体迈向立体影像时代急需且必须的核心技术。目前尚未有针对这种新型光场数据利用帧内预测技术的直接压缩方法,但是用传统图像的方法也能对这种新型光场数据进行压缩,只是能够获得的压缩率十分有限;如HEVC(HighEfficiencyVideoCod...
【技术保护点】
1.一种基于成像相关的多焦距光场视频帧内预测方法,其特征在于:包括以下步骤:/nS1、输入要进行帧内预测的当前预测单元,根据当前预测单元的位置和光场相机参数计算出当前预测单元对应的透镜类型I
【技术特征摘要】
1.一种基于成像相关的多焦距光场视频帧内预测方法,其特征在于:包括以下步骤:
S1、输入要进行帧内预测的当前预测单元,根据当前预测单元的位置和光场相机参数计算出当前预测单元对应的透镜类型I0;
S2、根据透镜类型I0和相机参数分别确定出透镜类型I0左、左上和右上相邻宏像素对应的透镜类型I1,I2和I3;
S3、根据透镜间的焦距关系分别计算出左、左上、右上相邻宏像素下的参考块的左上方像素点的位置p1,p2,p3和缩放因子f1,f2和f3;
S4、分别对各位置p1,p2,p3的参考块进行f1,f2,f3倍数的缩放,生成新的参考块x1,x2,x3;
S5、对新的参考块x1,x2和x3进行加权预测得到帧内预测块y。
2.如权利要求1所述的基于成像相关的多焦距光场视频帧内预测方法,其特征在于:还包括以下步骤:
S6、通过代价函数,从包含所述帧内预测块y在内的由多个不同帧内预测模式预测得到的多个帧内预测块中进行选择,确定最佳预测块。
3.如权利要求1或2所述的基于成像相关的多焦距光场视频帧内预测方法,其特征在于:步骤S1中,根据光场相机微透镜阵列各焦距微透镜的分布和当前预测单元的位置确定出对应的透镜类型I0。
4.如权利要求1至3任一项所述的基于成像相关的多焦距光场视频帧内预测方法,其特征在于:步骤S2中,根据光场相机微透镜阵列各焦距微透镜的分布确定出透镜类型I0左、左上和右上相邻宏像素对应的透镜类型I1,I2和I3。
5.如权利要求1至4任一项所述的基于成像相关的多焦距光场视频帧内预测方法,其特征在于:步骤S3中各参考块的位置通过如下方法得到:
先计算相邻透镜与聚焦透镜的成像距离s,
其中,a为像平面与微透镜阵列间的水平距离,b为传感器到微透镜阵列间的距离,b′为相邻透镜到其成像平面的距离,d为微透镜直径,F’为相邻透镜的焦距,当像平面位于微透镜阵列与主透镜之间时取‘+’,当像平面位于传感器之后时取‘-...
【专利技术属性】
技术研发人员:金欣,李羚俊,江帆,
申请(专利权)人:清华大学深圳国际研究生院,
类型:发明
国别省市:广东;44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。