视频处理方法及装置、电子设备和存储介质制造方法及图纸

本公开提供了一种视频处理方法及装置、设备和介质，涉及图像及视频处理技术领域。实现方案为：确定视频中连续的第一帧和第二帧；基于所述第一帧和所述第二帧之间的运动信息确定所述第一帧中的运动区域；对所述第一帧中的所述运动区域进行模糊处理以得到模糊后的第一帧；以及至少基于所述模糊后的第一帧对所述视频进行视频编码。视频进行视频编码。视频进行视频编码。

【技术实现步骤摘要】
视频处理方法及装置、电子设备和存储介质


[0001]本公开涉及图像及视频处理
，具体涉及一种视频处理方法、视频处理装置、电子设备、计算机可读存储介质和计算机程序产品。

技术介绍

[0002]视频图像经过数字化之后数据量非常大，如果不加处理直接传输将会浪费大量带宽和存储，同时也会耗费大量处理所需时间，因此视频在传输之前需要进行压缩编码，在这期间就需要用到视频编解码技术。视频编解码是将数字视频信号压缩存储和解压缩的过程，编码器将原始视频信号转换为压缩视频数据，解码器则将压缩的视频数据恢复为原始视频信号。
[0003]此部分中描述的方法不一定是之前已经设想到或采用的方法。除非另有指明，否则不应假定此部分中描述的任何方法仅因其包括在此部分中就被认为是现有技术。类似地，除非另有指明，否则此部分中提及的问题不应认为在任何现有技术中已被公认。

技术实现思路

[0004]本公开提供了一种视频处理方法、视频处理装置、电子设备、计算机可读存储介质和计算机程序产品。
[0005]根据本公开的一方面，提供了一种视频处理方法，包括：确定视频中连续的第一帧和第二帧；基于所述第一帧和所述第二帧之间的运动信息确定所述第一帧中的运动区域；对所述第一帧中的所述运动区域进行模糊处理以得到模糊后的第一帧；以及至少基于所述模糊后的第一帧对所述视频进行视频编码。
[0006]根据本公开的另一方面，还提供一种视频处理装置，包括：视频帧确定单元，被配置成确定视频中连续的第一帧和第二帧；运动区域确定单元，被配置成基于所述第一帧和所述第二帧之间的运动信息确定所述第一帧中的运动区域；模糊单元，被配置成对所述第一帧中的所述运动区域进行模糊处理以得到模糊后的第一帧；以及编码单元，被配置成至少基于所述模糊后的第一帧对所述视频进行视频编码。
[0007]根据本公开的另一方面，还提供一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中所述存储器存储有计算机程序，所述计算机程序在被所述至少一个处理器执行时实现根据上述的方法。
[0008]根据本公开的另一方面，还提供一种存储有计算机程序的非瞬时计算机可读存储介质，其中，所述计算机程序在被处理器执行时实现根据上述的方法。
[0009]根据本公开的另一方面，还提供一种计算机程序产品，包括计算机程序，其中，所述计算机程序在被处理器执行时实现根据上述的方法。
[0010]利用本公开提供的实施例，通过对视频帧中的运动区域进行模糊处理，可以通过去除运动区域的冗余信息来降低视频编码所需的码率。同时，通过识别图像中的运动区域并对运动区域进行模糊处理，可以在确保人眼主观感受的基本不变的前提下降低视频码
率，避免影响视频观感。
[0011]应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0012]附图示例性地示出了实施例并且构成说明书的一部分，与说明书的文字描述一起用于讲解实施例的示例性实施方式。所示出的实施例仅出于例示的目的，并不限制权利要求的范围。在所有附图中，相同的附图标记指代类似但不一定相同的要素。
[0013]图1示出了根据本公开的实施例的视频处理方法的示例性流程图；
[0014]图2示出了根据本公开的实施例视频处理装置的示例性框图；以及
[0015]图3示出了能够用于实现本公开的实施例的示例性电子设备的结构框图。
具体实施方式
[0016]以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
[0017]在本公开中，除非另有说明，否则使用术语“第一”、“第二”等来描述各种要素不意图限定这些要素的位置关系、时序关系或重要性关系，这种术语只是用于将一个元件与另一元件区分开。在一些示例中，第一要素和第二要素可以指向该要素的同一实例，而在某些情况下，基于上下文的描述，它们也可以指代不同实例。
[0018]在本公开中对各种所述示例的描述中所使用的术语只是为了描述特定示例的目的，而并非旨在进行限制。除非上下文另外明确地表明，如果不特意限定要素的数量，则该要素可以是一个也可以是多个。此外，本公开中所使用的术语“和/或”涵盖所列出的项目中的任何一个以及全部可能的组合方式。
[0019]下面将结合附图详细描述本公开的实施例。
[0020]以下是本公开的实施例涉及的术语解释。
[0021]视频码率：指在一段时间内视频数据传输的速率，通常用每秒传输的比特数(bps)来衡量。视频码率决定了视频文件的大小和画质，码率越高，视频画质越好，但文件大小也越大。
[0022]光流估计：指对于视频序列中相邻两帧之间的像素点，通过分析它们在时间上的变化，计算出每个像素点的运动速度和方向的过程。通常将像素在x和y方向上的运动速度分别称为水平光流和垂直光流。
[0023]稠密光流：指在图像序列中对每个像素点都计算出其在相邻帧中的运动速度和方向。
[0024]帧内编码和帧间编码是视频编解码过程中两个重要的技术。帧内编码是将一帧图像压缩成一系列的块，其中每个块独立地编码成比特流。这种方法需要较大的比特率，因为每一帧都需要编码。帧间编码是通过对连续的帧进行差分压缩。利用帧与帧之间的冗余性以更少的数据量来表示视频序列。因为帧间编码是利用连续帧之间的相关性进行压缩的，
因此相较于帧内编码在压缩率上具有更好的表现。
[0025]在视频编码的过程中，帧间编码的数据量相对较小，具有很高的压缩率，能够降低视频存储和传输所需的带宽，因此在实际应用中得到了广泛的应用。
[0026]但不管是帧间编码还是帧内编码，在编码过程中都需要对生成的残差数据进行编码保存，这部分的数据直接决定了视频码率的大小，因此减小其数据量能够进一步压缩视频码率。
[0027]人眼在观看视频过程中，通常注意力会集中在比较感兴趣的区域(ROI，region of interesting)例如人脸，因此，人们提出来ROI编码，即通过算法识别出ROI区域，并为其分配较高码率，其他地方则分配较低码率，其优势是为在降低码率的同时还提高了ROI区域的画质。上述的提到的ROI编码虽然在保证画质的前提下降低了码率，但其处理只局限在单帧处理上，虽然会通过一些手段确保ROI在帧间是连续的，但并没有真正利用视频的帧间信息来压缩码率。
[0028]为了进一步提高视频的压缩码率，本公开提供了一种新的视频处理方法。
[0029]图1示出了根据本公开的实施例的视频处理方法的示例性流程图。
[0030]如图1所述，在步骤S102中，确定视频中连续的第一帧和第二帧。本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频处理方法，包括：确定视频中连续的第一帧和第二帧；基于所述第一帧和所述第二帧之间的运动信息确定所述第一帧中的运动区域；对所述第一帧中的所述运动区域进行模糊处理以得到模糊后的第一帧；以及至少基于所述模糊后的第一帧对所述视频进行视频编码。2.如权利要求1所述的视频处理方法，其中，基于所述第一帧和所述第二帧之间的运动信息确定所述第一帧中的运动区域包括：确定所述第一帧和所述第二帧之间的光流；基于所述光流确定所述第一帧中的运动区域。3.如权利要求2所述的视频处理方法，其中，所述第一帧和所述第二帧之间的光流是稠密光流。4.如权利要求2所述的视频处理方法，其中，基于所述光流确定所述第一帧中的运动区域包括：基于所述光流确定所述第一帧中各个像素的光流强度；将所述具有大于阈值的光流强度的像素区域确定为所述运动区域。5.如权利要求4所述的视频处理方法，其中，所述光流强度是基于光流模长和所述第一帧的图像尺寸确定的。6.如权利要求4所述的视频处理方法，其中所述阈值是基于所述第一帧的图像尺寸确定的。7.如权利要求1所述的视频处理方法，其中，对所述第一帧中的所述运动区域进行模糊处理以得到模糊后的第一帧包括：确定指示所述第一帧中的所述运动区域的掩膜；对所述第一帧进行全局滤波，以得到经滤波的第一帧；以及利用所述掩膜对所述第一帧和所述经滤波的第一帧进行合成，以得到所述模糊后的第一帧。8.如权利要求7所述的视频处理方法，其中，对所述第一帧进行全局滤波包括：对所述第一帧进行全局高斯滤波。9.如权利...

【专利技术属性】
技术研发人员：邱慎杰，成超，蔡春磊，
申请(专利权)人：上海哔哩哔哩科技有限公司，
类型：发明
国别省市：