本公开涉及一种视频处理方法，以充分利用视频帧图像之间的关联，从而达到更好的视频实例分割效果，提升视频实例分割效率。该方法包括：获取待处理视频；将所述待处理视频输入实例分割模型，以得到所述待处理视频中每一帧图像的实例分割结果，所述实例分割模型用于针对所述待处理视频中的至少一帧图像，根据所述图像之前的历史帧图像的实例分割结果，确定所述图像的实例分割结果。图像的实例分割结果。图像的实例分割结果。
【技术实现步骤摘要】
视频处理方法、装置、存储介质及电子设备
[0001]本公开涉及图像处理
，具体地，涉及一种视频处理方法、装置、存储介质及电子设备。
技术介绍
[0002]视频理解可以对视频内容进行分析，抓取视频中的关键信息，广泛应用于安防监控、人类行为分析、体育视频解说等视频
视频实例分割作为视频理解任务的基础，主要是预测视频帧图像中每一个像素点属于哪一类的标签，并区分出属于同一类不同的个体，比如视频中包括多个不同的人物，则通过视频实例分割可以从视频帧图像中分割出该多个不同的人物，为视频目标追踪等更进一步的视频理解过程提供基础。
技术实现思路
[0003]提供该
技术实现思路
部分以便以简要的形式介绍构思，这些构思将在后面的具体实施方式部分被详细描述。该
技术实现思路
部分并不旨在标识要求保护的技术方案的关键特征或必要特征，也不旨在用于限制所要求的保护的技术方案的范围。
[0004]第一方面，本公开提供一种视频处理方法，所述方法包括：
[0005]获取待处理视频；
[0006]将所述待处理视频输入实例分割模型，以得到所述待处理视频中每一帧图像的实例分割结果，所述实例分割模型用于针对所述待处理视频中的至少一帧图像，根据所述图像之前的历史帧图像的实例分割结果，确定所述图像的实例分割结果。
[0007]第二方面，本公开提供一种视频处理装置，所述装置包括：
[0008]获取模块，用于获取待处理视频；
[0009]分割模块，用于将所述待处理视频输入实例分割模型，以得到所述待处理视频中每一帧图像的实例分割结果，所述实例分割模型用于针对所述待处理视频中的至少一帧图像，根据所述图像之前的历史帧图像的实例分割结果，确定所述图像的实例分割结果。
[0010]第三方面，本公开提供一种计算机可读介质，其上存储有计算机程序，该程序被处理装置执行时实现第一方面中所述方法的步骤。
[0011]第四方面，本公开提供一种电子设备，包括：
[0012]存储装置，其上存储有计算机程序；
[0013]处理装置，用于执行所述存储装置中的所述计算机程序，以实现第一方面中所述方法的步骤。
[0014]通过上述技术方案，实例分割模型可以用于针对待处理视频中的至少一帧图像，根据该图像之前的历史帧图像的实例分割结果，确定该图像的实例分割结果。相较于针对视频中每一帧图像进行独立实例分割的方式，可以充分利用视频帧图像之间的关联，从而达到更好的视频实例分割效果。并且，由于结合视频帧图像之前的历史视频帧图像所对应的实例分割结果进行实例分割，因此可以避免冗余的实例分割操作，从而提升视频实例分
割效率。
[0015]本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
[0016]结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的，原件和元素不一定按照比例绘制。在附图中：
[0017]图1是根据本公开一示例性实施例示出的一种视频处理方法的流程图；
[0018]图2是基于直角坐标系的逐像素分割示意图；
[0019]图3是基于极坐标的边缘分割示意图；
[0020]图4是根据本公开一示例性实施例示出的一种视频处理方法中实例分割模型的示意图；
[0021]图5是根据本公开一示例性实施例示出的一种视频处理方法进行实例分割的示意图；
[0022]图6是根据本公开一示例性实施例示出的一种视频处理装置的框图；
[0023]图7是根据本公开一示例性实施例示出的一种电子设备的框图。
具体实施方式
[0024]下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
[0025]应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
[0026]本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
[0027]需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。另外需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
[0028]本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
[0029]视频理解可以对视频内容进行分析，抓取视频中的关键信息，广泛应用于安防监控、人类行为分析、体育视频解说等视频
视频实例分割作为视频理解任务的基础，主要是预测视频帧图像中每一个像素点属于哪一类的标签，并区分出属于同一类不同的个体，比如视频中包括多个不同的人物，则通过视频实例分割可以从视频帧图像中分割
出该多个不同的人物，为视频目标追踪等更进一步的视频理解过程提供基础。
[0030]专利技术人研究发现，相关技术中的视频处理过程中视频实例分割通常是分别对视频中的每一帧图像进行实例分割，即在对视频中某一帧图像进行实例分割时，没有充分利用该帧图像的上一帧图像所对应的实例分割结果，难以达到最优分割效果。并且，对于具有时间连续性的视频帧图像而言，其视频帧图像的内容通常相互关联或者存在相同部分，若对每帧图像进行独立的实例分割，则很可能存在较多冗余的实例分割操作，不仅影响实例分割效率，还影响后续视频理解任务的执行效率。
[0031]有鉴于此，本公开提供一种视频处理方法，以结合视频帧图像之前的历史视频帧图像所对应的实例分割结果进行实例分割，充分利用视频帧图像之间的关联，从而达到更好的视频实例分割效果，提升视频实例分割效率。
[0032]图1是根据本公开一示例性实施例示出的一种视频处理方法的流程图。参照图1，该视频处理方法包括：
[0033]步骤101，获取待处理视频。
[0034]示例地，获取待处理视频可以是响应于用户的视频输入操作，获取用户输入的视频，也可以是在接收到视频实例分割指令后自动从图像采集设备中获取该图像采集设备拍摄的视频，等等，本公开实施例对此不作限定。
[0035]步骤102，将待处理视频输入本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种视频处理方法，其特征在于，所述方法包括：获取待处理视频；将所述待处理视频输入实例分割模型，以得到所述待处理视频中每一帧图像的实例分割结果，所述实例分割模型用于针对所述待处理视频中的至少一帧图像，根据所述图像之前的历史帧图像的实例分割结果，确定所述图像的实例分割结果。2.根据权利要求1所述的方法，其特征在于，所述历史帧图像的实例分割结果包括从待分割实例的中心点发出的第一射线，所述根据所述图像之前的历史帧图像的实例分割结果，确定所述图像的实例分割结果，包括：根据所述历史帧图像基于极坐标的实例分割结果以及所述图像的特征图，确定所述图像基于极坐标的实例分割调整信息；根据所述实例分割调整信息调整所述第一射线，以得到从所述待分割实例的中心点发出的第二射线，并根据所述第二射线确定所述图像基于极坐标的实例分割结果。3.根据权利要求2所述的方法，其特征在于，所述实例分割调整信息包括实例分割调整射线，所述实例分割调整射线的起点为所述第一射线的终点，所述实例分割调整射线的方向与所述第一射线的方向相同或相反，所述根据所述实例分割调整信息调整所述第一射线，包括：在所述第一射线的基础上叠加所述实例分割调整射线，以使所述第一射线沿远离所述中心点的方向或沿靠近所述中心点的方向变化。4.根据权利要求1
‑
3任一项所述的方法，其特征在于，所述历史帧图像为所述图像的上一帧图像。5.根据权利要求1
‑
3任一项所述的方法，其特征在于，所述实例分割模型用于针对所述待处理视频中的第一帧图像，从所述第一帧图像中待分割实例的中心点发出多条射线，并将所述多条射线的终点连接而成的闭合图形作为所述第一帧图像的实例分割结果。6.根据权利要求1
‑
3任一项所述的方法，其特征在于，所...
【专利技术属性】
技术研发人员：江毅，孙培泽，袁泽寰，王长虎，
申请(专利权)人：北京有竹居网络技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。