确定视频标注信息的方法、装置、设备和计算机存储介质制造方法及图纸

本公开的实施例涉及一种用于确定视频的标注信息的方法、装置、设备和计算机可读存储介质。该方法可以包括确定视频中的文本信息和视频信息。该方法还可以包括确定与文本信息相关联的第一实体和与视频信息相关联的第二实体。此外，该方法可以进一步包括基于第一实体和第二实体，确定视频的标注信息。本公开的技术方案能够实现多模态的视频标注，显著提高了视频标注方案的适用性。此外，可以使用与文本信息相关联的实体信息以及与视频信息相关联的实体信息进行相互校验，以避免视频标注发生错误的情形。

【技术实现步骤摘要】
确定视频标注信息的方法、装置、设备和计算机存储介质
本公开的实施例主要涉及信息处理领域，并且更具体地，涉及确定视频标注信息的方法、装置、设备和计算机存储介质。
技术介绍
在当前信息流中，短视频内容占比不断提高，其价值也变得越来越大。基于视频内容理解对视频进行标注，可以将视频的主题以文本的形式呈现给用户，从而帮助用户便捷地了解视频信息，实现对用户的个性化推荐，从而提升视频类的多媒体产品的用户粘性。然而，传统方案一般是对视频进行单模态的实体标注，例如，单纯通过文本信息或者视频信息来对视频进行标注。单模态标注最大的问题在于仅单一地考量视频的一方面信息，且该方面信息并不一定值得信任，故在标注的准确性和适用性方面存在瓶颈。
技术实现思路
根据本公开的示例实施例，提供了一种确定视频的标注信息的方案。在本公开的第一方面中，提供了一种用于确定视频的标注信息的方法。该方法可以包括确定视频中的文本信息和视频信息。该方法还可以包括确定与文本信息相关联的第一实体和与视频信息相关联的第二实体。此外，该方法可以进一步包括基于第一实体和第二实体，确定视频的标注信息。在本公开的第二方面中，提供了一种用于确定视频的标注信本文档来自技高网...

【技术保护点】
1.一种用于确定视频的标注信息的方法，包括：确定所述视频中的文本信息和视频信息；确定与所述文本信息相关联的第一实体和与所述视频信息相关联的第二实体；以及基于所述第一实体和所述第二实体，确定所述视频的所述标注信息。

【技术特征摘要】
1.一种用于确定视频的标注信息的方法，包括：确定所述视频中的文本信息和视频信息；确定与所述文本信息相关联的第一实体和与所述视频信息相关联的第二实体；以及基于所述第一实体和所述第二实体，确定所述视频的所述标注信息。2.根据权利要求1所述的方法，其中确定所述视频的所述标注信息包括：获取所述第一实体和所述第二实体的相应权重；以及响应于所述第一实体与所述第二实体不匹配，基于所述第一实体和所述第二实体中权重较高的实体，确定所述视频的所述标注信息。3.根据权利要求1所述的方法，其中确定所述视频的所述标注信息包括：将所述第一实体和所述第二实体中的一个实体确定为信任实体；在包含所述信任实体的知识库中确定与所述信任实体相关联的实体集合；以及响应于所述实体集合中具有与所述第一实体和所述第二实体中的另一实体不匹配的实体，基于所述实体集合确定所述视频的所述标注信息。4.根据权利要求1所述的方法，其中确定所述视频中的所述文本信息包括提取所述视频中的以下至少一项：标题、视频描述信息、字幕识别信息和语音识别信息。5.根据权利要求1所述的方法，其中确定所述视频中的所述视频信息包括：确定所述视频中的多个帧之间的差异；以及基于所述差异，从所述多个帧中确定所述视频信息。6.根据权利要求5所述的方法，其中从所述多个帧中确定所述视频信息包括：对所述多个帧中的第一帧和第二帧进行比较；以及响应于所述第一帧与所述第二帧的像素差大于预定阈值，基于所述第一帧和所述第二帧中的至少一部分确定所述视频信息。7.根据权利要求1所述的方法，还包括：确定与所述标注信息相关联的第三实体；基于包含所述第三实体的知识库，确定与所述第三实体相关联的实体集合；以及基于所述实体集合确定所述视频的扩展信息。8.一种用于确定视频的标注信息的装置，包括：信息确定模块，被配置为确定所述视频中的文本信息和视频信息；实体确定模块，被配置为确定与所述文本信息相关联的第一实体和与所述视频信息相关联的第二实体；以及第一信息标注模块，被配置为基于所述第一实体和所述第二实体，确定所述视频的所述标注信息。9.根据权利要求8所述的装置，其中所述第一信息标注模块进一步包括：权重获取模块，被配置...

【专利技术属性】
技术研发人员：任可欣，王述，徐也，张晓寒，冯知凡，张扬，朱勇，
申请(专利权)人：北京百度网讯科技有限公司，
类型：发明
国别省市：北京,11