影像插补方法、装置和存储介质制造方法及图纸

本发明专利技术公开了一种影像插补方法、装置和存储介质，影像插补方法包括以下步骤：获取第一影像和第二影像，其中，第一影像和第二影像为待处理视频源中两相邻帧的影像；利用预设的多种分层模式，分别对第一影像和第二影像进行分层处理，得到多个第一分层影像组和多个第二分层影像组；分别对采用相同分层模式得到的第一分层影像组和第二分层影像组进行动态评估，以确定最佳分层模式；根据最佳分层模式对应的第一分层影像组和第二分层影像组确定插帧影像。该影像插补方法，通过分层方式进行影像插补，得到的插补影像可使视频更流畅，进而可提升用户对视频的观看体验。

【技术实现步骤摘要】
影像插补方法、装置和存储介质
本专利技术涉及视频处理
，尤其涉及一种影像插补方法、装置和存储介质。
技术介绍
随着消费性多媒体产品的盛行，取像或显像相关的电子装置成为重要的产业项目，如平面显示器、数字相机等。以平面显示器为例，不仅尺寸与分辨率的提高,帧率的提高也是目前平面显示器追求的目标,但是旧有的影片帧率都是相对较低的,如果在新式高帧率的平面显示器观看旧的低帧率影片,无法体现出高帧率平面显示器带来的流畅效果。为此，相关技术中提出了一种将画面切块进行模板匹配的方式进行影像插补处理，但是该技术只适用于单一帧率视频源的处理，对于视频源中存在两种或两种以上帧率(例如，视频源中同时包含25Hz和30Hz的帧率)时，得到的插补结果会产生异常，甚至是比视频源更不利于观看。
技术实现思路
本专利技术旨在至少在一定程度上解决相关技术中的技术问题之一。为此，本专利技术的一个目的在于提出一种影像插补方法，以提升视频观感。本专利技术的第二个目的在于提出一种计算机可读存储介质。本专利技术的第三个目的在于提出一种影像插补装置。为达到上述目的，本专利技术第一方面提出了一种影像插补方法，包括以下步骤：获取第一影像和第二影像，其中，所述第一影像和所述第二影像为待处理视频源中两相邻帧的影像；利用预设的多种分层模式，分别对所述第一影像和所述第二影像进行分层处理，得到多个第一分层影像组和多个第二分层影像组；分别对采用相同分层模式得到的第一分层影像组和第二分层影像组进行动态评估，以确定最佳分层模式；根据所述最佳分层模式对应的第一分层影像组和第二分层影像组确定插帧影像。本专利技术实施例的影像插补方法，通过对影像进行分层处理，并对各分层影像分别进行分块匹配，再进行合成，得到的插补影像可使视频更流畅，提升了用户对视频的观看体验。为达到上述目的，本专利技术第二方面提出了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时，实现上述的影像插补方法。为达到上述目的，本专利技术第三方面提出了一种影像插补装置，包括存储器、处理器和存储在所述存储器上的计算机程序，所述计算机程序被处理器执行时，实现上述的影像插补方法。本专利技术附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本专利技术的实践了解到。附图说明图1是本专利技术实施例的影像插补方法的流程图；图2是本专利技术一个具体实施例的影像插补处理的流程图；图3是本专利技术一个示例的分层处理效果图；图4是本专利技术一个示例的插帧影像的示意图；图5(a)、图5(b)是本专利技术一个示例的得到插帧影像的示意图；图6(a)、图6(b)、图6(c)是本专利技术一个具体示例的影像插补处理的效果比对示意图；图7是本专利技术实施例的影像插补处理装置的结构框图。具体实施方式下面详细描述本专利技术的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本专利技术，而不能理解为对本专利技术的限制。下面参考附图描述本专利技术实施例的影像插补方法、装置和存储介质。图1是本专利技术实施例的影像插补方法的流程图。如图1所示，影像插补方法包括以下步骤：S1，获取第一影像和第二影像，其中，第一影像和第二影像为待处理视频源中两相邻帧的影像。其中，待处理视频源可以是包含多个正在进行视频播放的播放窗口的视频，也可以是视频通话界面中的视频，还可以是显示弹幕或可移动字幕的视频。当然，待处理视频源也可以是常规的视频。S2，利用预设的多种分层模式，分别对第一影像和第二影像进行分层处理，得到多个第一分层影像组和多个第二分层影像组。其中，第一分层影像组包括多个第一分层影像，第二分层影像组包括多个第二分层影像。预设的分层模式可以有x种，x为大于等于2的整数，利用预设的分层模式可以将影像分成m层，m＝1时，分层影像组中的分层影像有一个，m＝2时，分层影像组中的分层影像有两个，m＝3时，分层影像组中的分层影像有三个，依次类推。在一个可行的实施例中，如图2所示，预设三种分层模式，分别记为第一分层模式、第二分层模式和第三分层模式。作为一个示例，利用第一分层模式对第一影像进行分层处理，可包括：获取第一影像的R、G、B值；根据R、G、B值得到第一影像的亮度值；将第一影像的亮度值与n个预设亮度阈值进行比较，其中，n为大于0的整数；根据比较结果将第一影像分成m张第一分层影像，其中，m为大于0的整数。具体地，第一影像为RGB影像，第一影像的亮度值Y可为：Y＝0.30R+0.59G+0.11B。若R、G、B值最小为0，最大为1，则对应的Y最小为0，最大为1。可设置一个预设亮度阈值，例如0.95(该0.95为可调整参数)，如图3所示，将第一影像Fn中Y值大于0.95的像素点归类为一层(如图3所示的字幕层Fn_L1T)，将Y值小于或等于0.95的归类为另一层(如图3所示的影像层Fn_L1V)，由此得到两张第一分层影像，这两张分层影像也均为RGB影像。对应地，利用第一分层模式对第二影像Fn+1进行分层处理，可得到两张第二分层影像，分别为Fn+1_L1T和Fn+1_L1V。作为另一个示例，利用第二分层模式对第一影像进行分层处理，可包括：将第一影像进行RGB转YUV处理，得到第一变换影像；对第一变换影像进行直方图统计，并根据直方图统计结果对第一影像进行等化处理，得到第一等化影像；获取第一等化影像的R、G、B值；根据第一等化影像的R、G、B值得到第一等化影像的亮度值；将第一等化影像的亮度值与n个预设亮度阈值进行比较，其中，n为大于0的整数；根据比较结果将第一影像分成m张第一分层影像，其中，m为大于0的整数。具体地，先将第一影像进行RGB转YUV处理，得到第一变换影像，并取Y值做影像亮度评估，Y＝0.30R+0.59G+0.11B。然后将Y值影像(即第一变换影像)做直方图统计，并根据直方图统计结果对第一影像做等化处理(即直方图均衡化)，得到第一等化影像，以使较暗的影像，灰阶层次会聚集在数值低的区域；整体看起来明亮的影像，灰阶层次会聚集在数值高的区域，即使得灰阶层次平均分散于第一等化影像所有范围。进一步地，对第一等化影像的处理方式与上述利用第一分层模式对第一影像的分层方式相同。即，获取第一等化影像的R、G、B值，第一等化影像的亮度值Y可为：Y＝0.30R+0.59G+0.11B。若R、G、B值最小为0，最大为1，则对应的Y最小为0，最大为1。可设置一个预设亮度阈值，例如0.95，将第一影像Fn中对应Y值大于0.95的像素点归类为一层(如字幕层Fn_L2T)，将Y值小于或等于0.95的归类为另一层(如影像层Fn_L2V)，由此得到两张第一分层影像，这两张分层影像也均为RGB影像。对应地，利用第二分层模式对第二影像Fn+1进行分层处理，可得到两张第二分层影像，分别为Fn+1_L2T和Fn+1_L本文档来自技高网...

【技术保护点】
1.一种影像插补方法，其特征在于，包括以下步骤：/n获取第一影像和第二影像，其中，所述第一影像和所述第二影像为待处理视频源中两相邻帧的影像；/n利用预设的多种分层模式，分别对所述第一影像和所述第二影像进行分层处理，得到多个第一分层影像组和多个第二分层影像组；/n分别对采用相同分层模式得到的第一分层影像组和第二分层影像组进行动态评估，以确定最佳分层模式；/n根据所述最佳分层模式对应的第一分层影像组和第二分层影像组确定插帧影像。/n

【技术特征摘要】
1.一种影像插补方法，其特征在于，包括以下步骤：
获取第一影像和第二影像，其中，所述第一影像和所述第二影像为待处理视频源中两相邻帧的影像；
利用预设的多种分层模式，分别对所述第一影像和所述第二影像进行分层处理，得到多个第一分层影像组和多个第二分层影像组；
分别对采用相同分层模式得到的第一分层影像组和第二分层影像组进行动态评估，以确定最佳分层模式；
根据所述最佳分层模式对应的第一分层影像组和第二分层影像组确定插帧影像。


2.如权利要求1所述的影像插补方法，其特征在于，预设三种分层模式，分别记为第一分层模式、第二分层模式和第三分层模式。


3.如权利要求2所述的影像插补方法，其特征在于，利用所述第一分层模式对所述第一影像进行分层处理，包括：
获取所述第一影像的R、G、B值；
根据所述R、G、B值得到所述第一影像的亮度值；
将所述第一影像的亮度值与n个预设亮度阈值进行比较，其中，n为大于0的整数；
根据比较结果将所述第一影像分成m张第一分层影像，其中，n为大于0的整数。


4.如权利要求2所述的影像插补方法，其特征在于，利用所述第二分层模式对所述第一影像进行分层处理，包括：
将所述第一影像进行RGB转YUV处理，得到第一变换影像；
对所述第一变换影像进行直方图统计，并根据直方图统计结果对所述第一影像进行等化处理，得到第一等化影像；
获取所述第一等化影像的R、G、B值；
根据所述第一等化影像的R、G、B值得到所述第一等化影像的亮度值；
将所述第一等化影像的亮度值与n个预设亮度阈值进行比较，其中，n为大于0的整数；
根据比较结果将所述第一影像分成m张第一分层影像，其中，m为大于0的整数。


5.如权利要求2所述的影像插补方法，其特征在于，利用所述第三分层模式对所述第一影像进行分层处理，包括：
将所述第一影像进行RGB转YUV处理，得到第一变换影像；
将所述第一变换影像分割成N×N个区块；
对每个区块分别进行直方图统计，并根据每个区块的直方图统计结果对所述第一影像进行等化处理，得到第一等化影像；
获取所述第一等化影像的R、G、B值；
根据所述第一等化影像的R、...

【专利技术属性】
技术研发人员：王宇光，许焙凯，黄文艺，
申请(专利权)人：合肥合芯微电子科技有限公司，
类型：发明
国别省市：安徽;34