视频内容检索方法、视频内容检索装置及存储介质制造方法及图纸

本发明专利技术提供一种视频内容检索方法，其包括：获取视频内容对应的人脸检索信息、图案检索信息、声音检索信息以及文字检索信息；提取视频内容的音频帧，并按设定时间间隔提取视频内容的视频图像；使用预设检测算法检测视频图像以及音频帧，以获取视频内容的人脸信息、文字信息、图案信息以及声音信息；获取人脸相似信息、文字相似信息、图案相似信息、声音相似信息；根据人脸相似信息、文字相似信息、图案相似信息以及声音相似信息，生成内容检索报告。本发明专利技术还提供一种视频内容检索装置，本发明专利技术同时对视频内容中的人脸信息、文字信息、图案信息以及声音信息进行检索，提高了视频内容检索的准确率且降低了视频内容检索的成本。

Video Content Retrieval Method, Video Content Retrieval Device and Storage Media

【技术实现步骤摘要】
视频内容检索方法、视频内容检索装置及存储介质
本专利技术涉及数据处理领域，特别是涉及一种视频内容检索方法、视频内容检索装置及存储介质。
技术介绍
随着社会的发展，人们对各种共享资源的要求越来越高，如在互联网上共享各种视频资源或文字资源。但是为了避免非法视频资源或文字资源在互联网上传播，部分网络资源供应商会对客户上传的视频资源或文字资源进行内容审查。其中文字资源可使用机器自动对上传文字内容进行文字识别操作，总体的审核工作量较低。视频资源则需要人工对其中的图像内容以及声音内容进行鉴别，由于现在不法分子可在视频资源中间插入非法图像或非法声音，或者对视频资源中的图像内容或声音内容进行修改，这些视频资源中的修改点出现时间短或隐藏性较强，造成视频资源的人工审核的工作量以及工作难度大大增加，且人工审核容易出现疏漏。故现有的视频内容检索方法的成本较高且准确率较低。
技术实现思路
本专利技术实施例提供一种检索成本较低且视频内容检索的准确率较高的视频内容检索方法、视频内容检索装置及存储介质；以解决现有的视频内容检索方法及视频内容检索装置的成本较高且准确率较低的技术问题。本专利技术实施例提供一种视频内容检索方本文档来自技高网...

【技术保护点】
1.一种视频内容检索方法，其特征在于，包括：获取视频内容对应的人脸检索信息、图案检索信息、声音检索信息以及文字检索信息；提取所述视频内容的音频帧，并按设定时间间隔提取所述视频内容的视频图像；使用预设检测算法检测所述视频图像以及所述音频帧，以获取所述视频内容的人脸信息、文字信息、图案信息以及声音信息；获取所述视频内容的人脸信息与所述人脸检索信息的人脸相似信息、所述视频内容的文字信息与所述文字检索信息的文字相似信息、所述视频内容的图案信息与所述图案检索信息的图案相似信息、所述视频内容的声音信息与所述声音检索信息的声音相似信息；以及根据所述人脸相似信息、所述文字相似信息、所述图案相似信息以及所述声音...

【技术特征摘要】
1.一种视频内容检索方法，其特征在于，包括：获取视频内容对应的人脸检索信息、图案检索信息、声音检索信息以及文字检索信息；提取所述视频内容的音频帧，并按设定时间间隔提取所述视频内容的视频图像；使用预设检测算法检测所述视频图像以及所述音频帧，以获取所述视频内容的人脸信息、文字信息、图案信息以及声音信息；获取所述视频内容的人脸信息与所述人脸检索信息的人脸相似信息、所述视频内容的文字信息与所述文字检索信息的文字相似信息、所述视频内容的图案信息与所述图案检索信息的图案相似信息、所述视频内容的声音信息与所述声音检索信息的声音相似信息；以及根据所述人脸相似信息、所述文字相似信息、所述图案相似信息以及所述声音相似信息，生成内容检索报告。2.根据权利要求1所述的视频内容检索方法，其特征在于，所述使用预设检测算法检测所述视频图像以及所述视频帧，以获取所述视频内容的人脸信息、文字信息、图案信息以及声音信息的步骤包括：使用预设人脸神经网络检测所述视频图像中的人脸区域，以获取所述视频内容的人脸信息；使用文字识别算法检测所述视频图像中的文字区域，以获取所述视频内容的文字信息；使用预设图案神经网络检测所述视频图像中的图案区域，以获取所述视频内容的图案信息；对所述音频帧进行语音识别操作，以获取所述视频内容的声音信息。3.根据权利要求2所述的视频内容检索方法，其特征在于，所述视频内容检索方法还包括：获取多个人脸样本图像，并使用多个所述人脸样本图像训练所述预设人脸神经网络；获取多个图案样本图像，并使用多个所述图案样本图像训练所述预设图案神经网络。4.根据权利要求2所述的视频内容检索方法，其特征在于，所述获取所述视频内容的人脸信息与所述人脸检索信息的人脸相似信息的步骤包括：获取所述视频内容的人脸信息的人脸信息特征向量、以及所述人脸检索信息的人脸检索信息特征向量；计算所述人脸信息的人脸信息特征向量与所有人脸检索信息的人脸检索信息特征向量的向量距离；根据最小的向量距离，确定与所述人脸信息对应的人脸检索信息以及对应的人脸相似度。5.根据权利要求2所述的视频内容检索方法，其特征在于，所述获取所述视频内容的文字信息与所述文字检索信息的文字相似信息的步骤包括：判断所述文字信息是否与任一文字检索信息相同；如是，则将相同的文字检索信息确定为与所述文字信息对应的文字检索信息；如否，所述文字信息未对应任一文字检索信息；所述获取所述视频内容的图案信息与所述图案检索信息的图案相似信息的步骤包括：将相同的图案检索信息确定为与所述图案信息对应的图案检索信息；所述获取所述视频内容的声音信息与所述声音检索信息的声音相似信息的步骤包括：将相同的声音检索信息确定为与所述声音信息对应的声音检索信息。6.根据权利要求1所述的视频内容检索方法，其特征在于，所述根据所述人脸相似信息、所述文字相似信息、所述图案相似信息以及所述声音相似信息，生成内容检索报告的步骤包括：根据所述人脸信息的展示时间段、对应的人脸检索信息以及人脸相似度确定人脸信息检索报告；根据所述文字信息的展示时间段以及对应的文字检索信息确定文字信息检索报告；根据所述图案信息的展示时间段以及对应的图案检索信息确定图案信息检索报告；根据所述声音信息的展示时间段以及对应的声音检索信息确定声音信息检索报告。7.根据权利要求6所述的视频内容检索方法，其特征在于，所述根据所述人脸相似信息、所述文字相似信息、所述图案相似信息以及所述声音相似信息，生成内容检索报告的步骤还包括：将展示时间段的时间差小于第一设定值的人脸信息检索报告进行合并操作；将展示时间段的时间差小于第二设定值的文字信息检索报告进行合并操作；将展示时间段的时间差小于第三设定值的图案信息检索报告进行合并操作；将展示时间段的时间差小于第四设定值的声音信息检索报告进行合并操作。8.一种视频内容检索装置，其特征在于，包括：检索...

【专利技术属性】
技术研发人员：孙祥学，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：广东,44