一种基于视频内容的视频搜索方法和视频搜索装置制造方法及图纸

本发明专利技术提供了一种基于视频内容的视频搜索方法和视频搜索装置，接收用户输入的查询序列，根据视频帧索引确定其中包括的与所述查询序列匹配对应的至少一个视频帧及其对应的至少一个视频，其中，所述视频帧索引根据对视频中每一个视频帧对应的信息的识别所建立或更新，根据所述至少一个视频帧对应的时间戳，定位其对应的至少一个视频的播放位置，以所述播放位置将所述至少一个视频提供给所述用户。本发明专利技术可以基于视频中每一个视频帧的信息来搜索与查询序列匹配对应的视频，为用户精准的找到其要观看的视频，而且在搜索出对应的视频后，可将视频的播放位置定位至与查询序列对应的视频帧处进行播放，减少了用户的操作时间，提高的视频搜索的准确率。

Video search method and video search device based on video content

The invention provides a video content-based video search method and a video search device that receives a query sequence input by a user and determines, according to the video frame index, at least one video frame including at least one video frame corresponding to the query sequence and at least one video corresponding thereto, wherein the video frame index is based on a pair of pairs The identification of the information corresponding to each video frame in the video is established or updated to locate the playback position of the corresponding at least one video according to the timestamp corresponding to the at least one video frame and to provide the at least one video to the user at the playback position. The invention can search the video matching the query sequence based on the information of each video frame in the video, accurately find the video to be watched for the user, and locate the playback position of the video to the video frame corresponding to the query sequence after searching out the corresponding video, thereby reducing the user. The operation time improves the accuracy of video search.

【技术实现步骤摘要】
一种基于视频内容的视频搜索方法和视频搜索装置
本专利技术涉及视频搜索领域，尤其涉及一种基于视频内容的视频搜索技术。
技术介绍
随着多媒体业务的不断发展，数据库中存储的视频数量越来越多，用户对视频搜索的需求也越来越大。现有技术主要通过视频标注的外部标签，例如，视频标题，发布者名称，视频摘要，或者简介信息来实现从海量的数据中搜索用户需要的视频。但是用户有时候只能记得某个画面，或者该画面展示或者介绍的内容，经常无法根据视频标注的笼统的外部标签，搜索到包括该画面的视频。因此，如何提出一种基于视频的内容或者视频帧的内容进行视频搜索的方法，成为本领域亟需解决的技术问题之一。
技术实现思路
本专利技术的目的是提供一种基于视频内容的视频搜索装置和视频搜索方法。根据本专利技术的一个方面，提供了一种基于视频内容的视频搜索装置，其中，该视频搜索装置包括：接收装置，用于接收用户输入的查询序列；确定装置，用于根据视频帧索引确定其中包括的与所述查询序列匹配对应的至少一个视频帧及其对应的至少一个视频，其中，所述视频帧索引根据对视频中每一个视频帧对应的信息的识别所建立或更新；定位装置，用于根据所述至少一个视频帧对应的时间戳，定位其对应的至少一个视频的播放位置，以所述播放位置将所述至少一个视频提供给所述用户。优选地，该视频搜索装置还包括：第一识别装置，用于对每一个视频中每一个视频帧对应的信息进行识别，获得对应的标注信息；更新装置，用于根据所述标注信息，建立或更新所述视频帧索引；其中，在确定装置中根据所述查询序列匹配对应的至少一个视频帧及其对应的至少一个视频的方式包括：根据所述查询序列，在所述视频帧索引中匹配确定具有与所述查询序列相匹配的标注信息的至少一个视频帧及其对应的至少一个视频。优选地，该视频搜索装置还包括：第二识别装置，用于对每一个视频中每一个视频帧对应的信息进行识别，获得对应的标注信息；建立装置，用于根据所述标注信息，为每一个视频建立一个子索引；其中，在确定装置中根据所述查询序列匹配对应的至少一个视频帧及其对应的至少一个视频的方式包括：根据所述查询序列，依次在各个视频分别对应的各个子索引中匹配确定具有与所述查询序列相匹配的标注信息的至少一个视频帧。优选地，所述标注信息通过以下至少任一项获得：识别一个视频帧图像的图像特征，根据所述图像特征确定所述一个视频帧图像对应的标注信息；识别一个视频帧图像的图像特征，并根据识别的所述一个视频帧图像的前置图像和后置图像的图像特征，确定对应的标注信息；识别至少一个连续的视频帧所对应的音频信息，将所述音频信息转换成文字信息，根据所述文字信息确定所述至少一个连续的视频帧对应的标注信息；提取至少一个连续的视频帧所对应的字幕信息，根据所述字幕信息确定所述至少一个连续的视频帧对应的标注信息。优选地，该视频搜索装置还包括：排序装置，用于对所述至少一个视频进行排序，获得排序后的至少一个视频；其中，定位装置用于：根据所述至少一个视频帧，定位其对应的所述排序后的至少一个视频的播放位置，以所述播放位置将所述排序后的至少一个视频提供给所述用户。优选地，根据以下至少任一项对所述至少一个视频进行排序：视频中所包括的与所述查询序列匹配的视频帧的数量；视频对应的视频发布者信息；视频的来源信息；视频的清晰度；视频的主题信息；用户对视频的反馈信息。优选地，所述定位装置还用于：获取所述用户自所述至少一个视频中所选择的一个目标视频；若所述目标视频中包括多个与所述查询序列匹配的视频帧，则按以下任一项来定位所述目标视频的播放位置：默认根据所述目标视频中第一个与所述查询序列匹配的视频帧的时间戳来确定；默认定位至与所述查询序列匹配程度最高的视频帧；由所述用户选择。根据本专利技术的另一个方面，还提供了一种基于视频内容的视频搜索方法，其中，该视频搜索方法包括：a.接收用户输入的查询序列；b.根据视频帧索引确定其中包括的与所述查询序列匹配对应的至少一个视频帧及其对应的至少一个视频，其中，所述视频帧索引根据对视频中每一个视频帧对应的信息的识别所建立或更新；c.根据所述至少一个视频帧对应的时间戳，定位其对应的至少一个视频的播放位置，以所述播放位置将所述至少一个视频提供给所述用户。优选地，该视频搜索方法还包括：对每一个视频中每一个视频帧对应的信息进行识别，获得对应的标注信息；根据所述标注信息，建立或更新所述视频帧索引；其中，步骤b中根据所述查询序列匹配对应的至少一个视频帧及其对应的至少一个视频的方式包括：根据所述查询序列，在所述视频帧索引中匹配确定具有与所述查询序列相匹配的标注信息的至少一个视频帧及其对应的至少一个视频。优选地，该视频搜索方法还包括：对每一个视频中每一个视频帧对应的信息进行识别，获得对应的标注信息；根据所述标注信息，为每一个视频建立一个子索引；其中，步骤b中根据所述查询序列匹配对应的至少一个视频帧及其对应的至少一个视频的方式包括：根据所述查询序列，依次在各个视频分别对应的各个子索引中匹配确定具有与所述查询序列相匹配的标注信息的至少一个视频帧。优选地，所述标注信息通过以下至少任一项获得：识别一个视频帧图像的图像特征，根据所述图像特征确定所述一个视频帧图像对应的标注信息；识别一个视频帧图像的图像特征，并根据识别的所述视频帧图像的前置图像和后置图像的图像特征，确定对应的标注信息；识别一个视频帧所对应的音频信息，将所述音频信息转换成文字信息，根据所述文字信息确定所述视频帧对应的标注信息；提取一个视频帧所对应的字幕信息，根据所述字幕信息确定所述视频帧对应的标注信息。优选地，该视频搜索方法还包括：对所述至少一个视频进行排序，获得排序后的至少一个视频；其中，步骤c包括：根据所述至少一个视频帧，定位其对应的所述排序后的至少一个视频的播放位置，以所述播放位置将所述排序后的至少一个视频提供给所述用户。优选地，根据以下至少任一项对所述至少一个视频进行排序：视频中所包括的与所述查询序列匹配的视频帧的数量；视频对应的视频发布者信息；视频的来源信息；视频的清晰度；视频的主题信息；用户对视频的反馈信息。优选地，步骤c中以所述播放位置将所述至少一个视频提供给所述用户还包括：获取所述用户自所述至少一个视频中所选择的一个目标视频；若所述目标视频中包括多个与所述查询序列匹配的视频帧，则按以下任一项来定位所述目标视频的播放位置：默认根据所述目标视频中第一个与所述查询序列匹配的视频帧的时间戳来确定；默认定位至与所述查询序列匹配程度最高的视频帧；由所述用户选择。根据本专利技术的又一个方面，还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机代码，当所述计算机代码被执行时，如上任一项所述的视频搜索方法被执行。根据本专利技术的再一个方面，还提供了一种计算机程序产品，当所述计算机程序产品被计算机设备执行时，如上任一项所述的视频搜索方法被执行。根据本专利技术的再一个方面，还提供了一种计算机设备，所述计算机设备包括存储器和处理器，所述存储器中存储有计算机代码，所述处理器被配置来通过执行所述计算机代码以执行如上任一项所述的方法。与现有技术相比，本专利技术具有以下优点：本专利技术根据视频帧索引确定其中包括的与所述查询序列匹配对应的至少一个视频帧及其对应的至少一个视频，并且所述视频帧索引根据对视频中每一个视本文档来自技高网...

【技术保护点】
1.一种基于视频内容的视频搜索方法，其中，所述视频搜索方法包括：a.接收用户输入的查询序列；b.根据视频帧索引确定其中包括的与所述查询序列匹配对应的至少一个视频帧及其对应的至少一个视频，其中，所述视频帧索引根据对视频中每一个视频帧对应的信息的识别所建立或更新；c.根据所述至少一个视频帧对应的时间戳，定位其对应的至少一个视频的播放位置，以所述播放位置将所述至少一个视频提供给所述用户。

【技术特征摘要】
1.一种基于视频内容的视频搜索方法，其中，所述视频搜索方法包括：a.接收用户输入的查询序列；b.根据视频帧索引确定其中包括的与所述查询序列匹配对应的至少一个视频帧及其对应的至少一个视频，其中，所述视频帧索引根据对视频中每一个视频帧对应的信息的识别所建立或更新；c.根据所述至少一个视频帧对应的时间戳，定位其对应的至少一个视频的播放位置，以所述播放位置将所述至少一个视频提供给所述用户。2.根据权利要求1所述的视频搜索方法，其中，该视频搜索方法还包括：对每一个视频中每一个视频帧对应的信息进行识别，获得对应的标注信息；根据所述标注信息，建立或更新所述视频帧索引；其中，步骤b中根据所述查询序列匹配对应的至少一个视频帧及其对应的至少一个视频的方式包括：根据所述查询序列，在所述视频帧索引中匹配确定具有与所述查询序列相匹配的标注信息的至少一个视频帧及其对应的至少一个视频。3.根据权利要求1所述的视频搜索方法，其中，该视频搜索方法还包括：对每一个视频中每一个视频帧对应的信息进行识别，获得对应的标注信息；根据所述标注信息，为每一个视频建立一个子索引；其中，步骤b中根据所述查询序列匹配对应的至少一个视频帧及其对应的至少一个视频的方式包括：根据所述查询序列，依次在各个视频分别对应的各个子索引中匹配确定具有与所述查询序列相匹配的标注信息的至少一个视频帧。4.根据权利要求2或3所述的视频搜索方法，其中，所述标注信息通过以下至少任一项获得：识别一个视频帧图像的图像特征，根据所述图像特征确定所述一个视频帧图像对应的标注信息；识别一个视频帧图像的图像特征，并根据识别的所述视频帧图像的前置图像和后置图像的图像特征，确定对应的标注信息；识别一个视频帧所对应的音频信息，将所述音频信息转换成文字信息，根据所述文字信息确定所述视频帧对应的标注信息；提取一个视频帧所对应的字幕信息，根据所述字幕信息确定所述视频帧对应的标注信息。5.根据权利要求1至4中任一项所述的视频搜索方法，其中，该视频搜索方法还包括：对所述至少一个视频进行排序，获得排序后的至少一个视频；其中，步骤c包括：根据所述至少一个视频帧，定位其对应的所述排序后的至少一个视频的播放位置，以所述播放位置将所述排序后的至少一个视频提供给所述用户。6.根据权利要求5中任一项所述的视频搜索方法，其中，根据以下至少任一项对所述至少一个视频进行排序：视频中所包括的与所述查询序列匹配的视频帧的数量；视频对应的视频发布者信息；视频的来源信息；视频的清晰度；视频的主题信息；用户对视频的反馈信息。7.根据权利要求1至6中任一项所述的视频搜索方法，其中，步骤c中以所述播放位置将所述至少一个视频提供给所述用户还包括：获取所述用户自所述至少一个视频中所选择的一个目标视频；若所述目标视频中包括多个与所述查询序列匹配的视频帧，则按以下任一项来定位所述目标视频的播放位置：默认根据所述目标视频中第一个与所述查询序列匹配的视频帧的时间戳来确定；由所述用户选择。8.一种基于视频内容的视频搜索装置，其中，所述视频搜索装置包括：接收装置，用于接收用户输入的查询序列；确定装置，用于根据视频帧索引确定其中包括的与所述查询序列匹配对应的至少一个视频帧及其对应的至少一个视频，其中，所述视频帧索引根据对视频中每一个视频帧对应的信息的识别所建立或更新；定位装置，用...

【专利技术属性】
技术研发人员：罗江春，陈锡岩，
申请(专利权)人：北京一览科技有限公司，
类型：发明
国别省市：北京,11