【技术实现步骤摘要】
一种稀疏光流确定方法和装置
本公开涉及视频处理
,尤其涉及一种稀疏光流确定方法和装置。
技术介绍
视频帧率提升是一种将低帧率视频转换为高帧率视频的视频后处理方法,在相邻两视频帧之间插入内插视频帧,以达到增加帧率的目的。例如,将视频帧率从30fps(FramesperSecond,帧每秒)提升至60fps。目前常用的视频帧率提升方法为光流插帧方法,通过相邻两视频帧之间的光流,确定相邻两视频帧之间的内插视频帧。为了降低光流计算复杂度,一般采用稀疏采样法确定相邻两视频帧之间的稀疏光流来进行视频插帧。现有确定稀疏光流的过程:通过设置目标采样步长对视频帧进行采样确定采样像素点,或通过对视频帧进行角点检测来确定采样像素点;根据采样像素点来确定该视频帧与相邻视频帧之间的稀疏光流。但是,通过设置目标采样步长对视频帧进行采样确定采样像素点时,若目标采样步长设置较大,则确定的采样像素点较少,使得确定的稀疏光流准确度较低;若目标采样步长设置较小,则确定的采样像素点较多,使得采样效率较低,进而影响稀疏光流的确定效率。通 ...
【技术保护点】
1.一种稀疏光流确定方法,其特征在于,包括:/n对第一视频帧进行边缘检测,确定所述第一视频帧的边缘区域和非边缘区域;/n基于第一采样步长在所述第一视频帧的边缘区域中确定采样像素点;/n基于第二采样步长在所述第一视频帧的非边缘区域中确定采样像素点,其中,所述第二采样步长大于所述第一采样步长;/n根据任一采样像素点,确定所述第一视频帧对应的稀疏光流。/n
【技术特征摘要】
1.一种稀疏光流确定方法,其特征在于,包括:
对第一视频帧进行边缘检测,确定所述第一视频帧的边缘区域和非边缘区域;
基于第一采样步长在所述第一视频帧的边缘区域中确定采样像素点;
基于第二采样步长在所述第一视频帧的非边缘区域中确定采样像素点,其中,所述第二采样步长大于所述第一采样步长;
根据任一采样像素点,确定所述第一视频帧对应的稀疏光流。
2.根据权利要求1所述的方法,其特征在于,所述第一采样步长为1。
3.根据权利要求1所述的方法,其特征在于,根据任一采样像素点,确定所述第一视频帧对应的稀疏光流,包括:
基于特征点匹配算法,在第二视频帧中确定所述任一采样像素点对应的匹配像素点,其中,所述第二视频帧和所述第一视频帧为相邻视频帧;
根据所述任一采样像素点对应的匹配像素点,确定所述第一视频帧对应的稀疏光流。
4.根据权利要求3所述的方法,其特征在于,基于特征点匹配算法,在第二视频帧中确定所述任一采样像素点对应的匹配像素点,包括:
基于所述特征点匹配算法,在所述第二视频帧中包含的所有像素点中,查找所述任一采样像素点对应的匹配像素点。
5.根据权利要求3所述的方法,其特征在于,基于特征点匹配算法,在第二视频帧中确定所述任一采样像素点对应的匹配像素点,包括:
对所述第二视频帧进行边缘检测,确定所述第二视频帧中的边缘区域和非边缘区域;
基于第三采样步长在所述第二视频帧的边缘区域中确定目标像素点;
基于第四采样步长在所述第二视频帧的非边缘区域中确定目标像素点,其中,所述第四采样步长大于所述第三采样步长;
基于所述特征点匹配算法,在所述目标像素点中,查找所述任一采样像素点对应的匹配像素点。
6.根据权利要求3或5所述的方法,其特征在于,对视频帧进行边缘检测,确定所述视频帧中的边缘区域和非边缘区域,包括:
对所述视频帧进行边缘检测,得到边缘检测结果;
对所述边缘检测结果进行边缘膨胀,得到所述视频帧的边缘区域;
将所述视频帧中边缘区域以外的其它区域确定为所述视频帧的非边缘区域。
7.根据权利要求3-5任一项所述的方法,其特征在于,所述特征点匹配算法包括下述至少一种:
尺度不变特征变换SIFT算法、方向梯度直方图HOG算法、加速稳健特征SURF算法。
8.根据权利要求6所述的方法,其特征在于,所述边缘检测的方式包括下述至少一种:
Canny边缘检测算法、滤波算法、深度学习算法。
9.一种稀疏光流确定装置,其特征在于,包括:
边缘检测模块,用于对第一视频帧进行边缘检测,确定所述第一视频帧的边缘区域和非边缘区域;
采样模块,用于基于第一采样步长在所述第一视频帧的边缘区域中确定采样像素点;
所述采样模块,还用于基于第二采样...
【专利技术属性】
技术研发人员:肖宇,
申请(专利权)人:阿里巴巴集团控股有限公司,
类型:发明
国别省市:开曼群岛;KY
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。