基于加权知识图的视频分段制造技术

一种用于将视频分段的系统、方法和计算机程序产品。该系统包括至少一个处理组件、至少一个存储器组件、视频(110)、提取组件(140)、以及绘图组件(150)。提取组件(140)被配置为从视频(110)中提取图像数据和文本数据(330，310)，识别图像数据(330)中的实体，将至少一个实体关系分配给图像数据(330)中的实体，识别文本数据(310)中的实体，以及将至少一个实体关系分配给文本数据(310)中的实体。绘图组件(150)被配置为针对被分配给图像数据(330)中的实体的实体关系而生成图像知识图(360)，针对被分配给文本数据(310)中的至少两个实体的实体关系而生成文本知识图(350)，以及基于图像知识图和文本知识图(360，350)来生成加权知识图(370)。(370)。(370)。

【技术实现步骤摘要】
【国外来华专利技术】基于加权知识图的视频分段

技术介绍

[0001]本公开涉及视频分段，并且更具体地，涉及基于在视频中识别的实体之间的关系来将视频分段。
[0002]视频包括时间相关的图像数据(例如，视频帧中的图形图像)，通常伴随有音频数据(例如，语音、音乐和其他噪声)。文本可以以诸如字幕、副标题、经由语音到文本引擎从语音数据中提取的文本、脚本、转录等的形式伴随该数据。视频可以基于从图像、音频和/或文本数据中提取的诸如实体(例如，特定的人、动物、无生命对象等)和其他特征(例如，讨论的主题、位置/设置、语言、音乐等)之类的内容而被分段成多组帧。例如，可以基于电影中的位置的内容特性(例如，语言、风景等)来检测该位置。描绘这种设置的视频帧可以被分组以形成段。这通常由视频镜头检测分段来执行。然而，这没有考虑视频中的在多于一个镜头中出现的场景或者包括多于一个场景的镜头。

技术实现思路

[0003]本专利技术提供了根据权利要求1所述的方法，以及根据权利要求8和9所述的相应的系统和计算机程序产品。
附图说明
[0004]图1是示出根据本公开的一些实施例的视频分段环本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种方法，包括：接收视频；从所述视频中提取图像数据和文本数据；识别所述图像数据中的至少两个实体；将至少一个实体关系分配给所述图像数据中的所述至少两个实体；识别所述文本数据中的至少两个实体；将至少一个实体关系分配给所述文本数据中的所述至少两个实体；针对被分配给所述图像数据中的所述至少两个实体的所述至少一个实体关系，生成图像知识图；针对被分配给所述文本数据中的所述至少两个实体的所述至少一个实体关系，生成文本知识图；以及基于所述图像知识图和所述文本知识图，生成加权知识图。2.根据权利要求1所述的方法，其中，所述加权知识图包括用于被分配给所述图像数据中的所述至少两个实体的所述至少一个实体关系和被分配给所述文本数据中的所述至少两个实体的所述至少一个实体关系的关系权重。3.根据权利要求2所述的方法，还包括：识别被分配给所述图像数据中的所述至少两个实体的所述至少一个实体关系和被分配给所述文本数据...

【专利技术属性】
技术研发人员：缪婉婉，殷昆燕，王建功，胡焰，王莲娜，
申请(专利权)人：国际商业机器公司，
类型：发明
国别省市：