一种基于制造技术

技术编号:39787655 阅读:25 留言:0更新日期:2023-12-22 02:27
本发明专利技术涉及计算机视觉处理技术领域,且公开了一种基于

【技术实现步骤摘要】
一种基于AI的照片级帧插值算法


[0001]本专利技术涉及计算机视觉处理
,具体为一种基于
AI
的照片级帧插值算法


技术介绍

[0002]DIB

R
,即
NV

tlabs(
英伟达实验室
)
提出的一种可微渲染框架,允许对图像中的所有像素进行梯度分析计算

该方法的关键是将前景光栅化视为局部属性的加权插值,将背景光栅化视为全局几何的基于距离的聚合

该方法允许通过各种照明模型对顶点位置

颜色

法线

光线方向和纹理坐标进行精确优化以实现单图像
3D
对象预测和
3D
纹理对象生成,两者都专门使用
2D
监督进行训练

[0003]帧插值
,
即通过软件算法结合硬件的算力合成一对图像之间的中间过渡图像
(
即中间帧
>)
,在计本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种基于
AI
的照片级帧插值算法,其特征在于,包括以下步骤:
S1、
对图像进行获取;
S2、
对获取的图像进行处理,将输入图像进行光栅化后再进行像素特征提取;
S3、
对像素特征提取后的图像,采用本地设备
AI
分析,调用
AI
模块对像素特征进行分析,并指定中间帧数
N
和预测像素分布;
S4、
通过预测像素分布后,对其像素进行着色处理,最终合成图像;
S5、
输出合成后的中间图像
。2.
根据权利要求1所述的一种基于
AI
的照片级帧插值算法,其特征在于:该方法将前景光栅化视为顶点属性的插值,对现有图像的每个像素执行缓冲测试,并将其分配给最近的覆盖面,每个像素都只受这个面的影响,通过这种方法,可以将梯度从在输出图像上定义的损失函数反向传递,通过像素值
I
i

链式法则到顶点属性
u
k
::其中
N
是图像覆盖的像素数,没有被前置物体覆盖的像素,将其称为背景像素,在上面的公式中,背景像素的渐变反向传递到网格属性
。3.
根据权利要求2所述的一种基于
AI
的照片级帧插值算法,其特征在于:当给定两个内容是连贯动作但动作幅度较大的输入图像
(I0,I1)
,合成一个中间图像
^It
,时间
t∈(0,1)
,其中
M
是本地设备真实数据训练的网络模型,其公式如下:在训练中,在
t

0.5
时进行分析,并通过递归方式调用网络模型

预测及生成更多中间图像,以实现帧插值
。4.
根据权利要求1所述的一种基于
AI
的照片级帧插值算法,其特征在于:本算法可将视...

【专利技术属性】
技术研发人员:王阴伟殷大勇刘雯
申请(专利权)人:南京梦计划动漫设计有限公司
类型:发明
国别省市:

相关技术
    暂无相关专利
网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1