网络视频搜索系统技术方案

一种网络应用技术领域的网络视频搜索系统，包括：数据存储模块、业务处理模块和用户接口模块，其中：所述的数据存储模块包括：网络视频爬虫子模块和数据库子模块；所述的业务处理模块包括：搜索接口子模块、数据库操作子模块、网络视频热词分析子模块、用户兴趣模型管理子模块、网络视频地址探测子模块和系统配置管理子模块。本发明专利技术为用户提供多层次的网络视频搜索服务，结合用户的兴趣主动智能地为用户提供网络视频，提供网络视频下载功能，系统具有分析网络视频热点词汇的能力，同时系统管理员能够通过多选择性的系统运行配置管理子模块去合理有效地管理系统，网络视频搜索所用的时间大大降低，且准确率得到提高。

【技术实现步骤摘要】

本专利技术涉及的是一种网络应用
的系统，具体是一种网络视频搜索系统。
技术介绍
随着互联网技术的不断发展，目前网络视频已经成为了传递信息中比较广泛的媒 介。主流视频运营网站层出不穷，国内的比较知名的有优酷网(youku)、土豆网(tudou)等 等。国外的知名的有youtube等等。一些综合门户网站也都有了各自视频服务，用来播放 新闻等媒体内容。搜索引擎除了向用户提供搜索的功能外，从本质上来说是一个数据信息 统计分析的工具。早期互联网以文字信息为主，如今网络视频成为了主要信息载体，搜索引 擎需要针对视频这种媒体有相应的统计分析办法。经对现有文献检索发现，2007年北京交通大学硕士学位论文《基于网络视频业务 的搜索引擎的设计与实现》，分类号为TP393. 09，该文主要讨论了基于网络视频业务的搜索 引擎系统，其系统架构主要包括了 3个模块信息抓取模块，信息索引模块，信息检索模块， 其中信息抓取模块主要包括网络蜘蛛从视频网站上抓取信息，并进行分析提取，把最终的 信息存入到数据库中。信息检索模块主要是从数据库中读取视频的属性信息，经过中文文 辞处理，采用Lucene生成索引文件。信息检索模块包括用户接口和索引器，用户接口主要 是接受用户输入的关键字，把搜索结果返回给用户，索引器主要根据用户的关键词，检索索 引文件，并按照一定的要求进行排序。该论文虽然讨论了实现网络视频搜索引擎的办法，但 是其所设计的搜索系统提供的功能较单一，只能够搜索网络视频，且搜索所用时间长，不能 提供多层次的搜索接口，也不具有网络视频热词分析功能、用户兴趣管理功能和网络视频 地址探测功能。
技术实现思路
本专利技术的目的在于克服现有技术中存在的上述不足，提供一种网络视频搜索系 统。本专利技术通过分析网络视频数据和用户搜索网络视频的行为，实现了多功能智能化的网 络视频搜索监控系统，具有用户个性化，网络视频可下载，视频搜索多层次，系统运行配置 灵活性和网络视频热点可统计性的优点。本专利技术是通过以下技术方案实现的本专利技术包括数据存储模块、业务处理模块和用户接口模块，其中数据存储模块 和业务处理模块相连传输数据信息和处理信息，业务处理模块与用户接口模块相连传输搜 索请求信息和搜索结果信息。所述的数据存储模块获取并存储网络视频数据，包括网络视频爬虫子模块和数 据库子模块，其中网络视频爬虫子模块和数据库子模块相连传输网络视频数据信息，网络 视频爬虫子模块与业务处理模块相连传输模块运行配置信息，数据库子模块与业务处理模 块相连传输数据库操作请求信息和数据库操作返回数据。所述的网络视频爬虫子模块包括页面下载单元、页面内容分析单元和视频信息提取单元，其中页面下载单元与页面内容分析单元相连待爬取视频网站页面数据，页面内 容分析单元与视频信息提取单元相连传输经过分析后页面中相关视频信息，视频信息提取 单元和数据库子模块相连传输页面中提取出的精确视频信息。所述的业务处理模块包括搜索接口子模块、数据库操作子模块、网络视频热词分 析子模块、用户兴趣模型管理子模块、网络视频地址探测子模块和系统配置管理子模块，其 中搜索接口子模块与用户接口模块相连传输搜索请求信息和搜索结果信息，数据库操作 子模块与搜索接口子模块相连传输搜索条件信息和搜索返回信息，数据库操作子模块与网 络视频热词分析子模块相连传输数据库操作信息和热词分析结果信息，数据库操作子模块 与用户兴趣模型管理子模块相连传输数据库操作信息和用户兴趣模型更新信息，数据库操 作子模块与网络视频地址探测子模块相连传输数据库操作信息和网络视频地址信息，系统 配置管理子模块与用户兴趣模型管理子模块相连传输块运行配置信息，系统配置管理子模 块与网络视频热词分析子模块相连传输运行配置信息，系统配置管理子模块与网络视频地 址探测子模块相连传输运行配置信息，系统配置管理子模块与数据库操作子模块相连传输 运行配置信息，系统配置管理子模块与网络视频爬虫子模块相连传输运行配置信息，数据 库操作子模块与数据存储模块相连传输数据库存储信息。所述的数据库操作子模块包括数据库检索数据单元、数据库添加数据单元、数据 库删除数据单元、数据库更新数据单元和数据库更新视图单元，其中数据库检索数据单元 与数据存储模块相连传输数据库检索语句和返回结果数据，数据库添加数据单元与数据存 储模块相连传输数据库添加数据命令，数据库删除数据单元与数据存储模块相连传输数据 库删除数据命令，数据库更新数据单元与数据存储模块相连传输数据库更新数据命令，数 据库更新视图单元与数据存储模块相连传输数据库视频更新命令。所述的搜索接口子模块包括用户搜索条件接受单元、用户搜索结果返回单元、搜 索条件处理单元和搜索执行单元，其中用户搜索条件接受单元与搜索条件处理单元相连 传输用户原始搜索条件信息，搜索条件处理单元与搜索执行单元相连传输经过系统处理后 的搜索指令信息，搜索执行单元与数据库操作子模块相连传输数据库操作信息，用户搜索 结果返回单元与数据库操作子模块相连传输数据库操作返回数据。所述的网络视频热词分析子模块包括视频标题提取单元、视频标题分词单元、标 题词汇聚类单元、标题词汇统计单元和热点词汇更新单元，其中视频标题提取单元与视频 标题分词单元相连传输被分析的视频标题集合，视频标题分词单元与标题词汇聚类单元相 连传输构成视频标题的词组，标题词汇聚类单元与标题词汇统计单元相连传输聚类完成的 词汇空间，标题词汇统计单元与热点词汇更新单元相连传输出现率较高的词汇集合，热点 词汇更新单元与数据库操作子模块相连传输添加数据的数据库操作命令，视频标题提取单 元与数据库操作子模块相连传输获取视频标题的数据库操作语句。所述的用户兴趣模型管理子模块包括用户行为表示单元、用户兴趣模型更新单 元和用户兴趣推荐单元，其中用户行为表示单元与用户兴趣模型更新单元相连传输用户 搜素行为标识信息，用户兴趣模型更新单元与数据库操作子模块相连传输更新用户兴趣的 数据库操作语句信息，用户兴趣推荐单元与数据库操作子模块相连传输用户推荐视频信息 提取数据库操作语句信息。所述的网络视频地址探测子模块包括数据包获取单元、数据包内容分析单元和文件地址提取单元，其中数据包获取单元与数据包内容分析单元相连传输抓取的 HTTP(HyperText Transfer Protocol，超文本传输协议)数据包，数据包内容分析单元与文 件地址提取单元相连传输含有文件地址的HTTP数据包，文件地址提取单元与数据库操作 子模块相连传输更新视频信息的数据库更新操作语句。所述的系统配置管理子模块包括网络视频爬虫配置单元、网络视频地址探测配 置单元、用户兴趣模型管理配置单元、网络视频热点词汇分析配置单元和陈旧数据删除单 元，其中网络视频爬虫配置单元与数据存储模块相连传输爬虫运行配置修改信息，用户兴 趣模型管理配置单元与用户兴趣模型管理子模块相连传输模块运行配置信息，网络视频热 点词汇分析配置单元与网络视频热词分析子模块相连传输模块运行配置信息，网络视频地 址探测配置单元与网络视频地址探测子模块相连传输模块运行配置信息，陈旧数据删除单 元与数据库操作子模块相连传输删除视频信息的数据库操作语句信息。与现有技术相比，本专利技术的有益效果是本专利技术能够为用户提本文档来自技高网...

【技术保护点】
一种网络视频搜索系统，其特征在于，包括：数据存储模块、业务处理模块和用户接口模块，其中：数据存储模块和业务处理模块相连传输数据信息和处理信息，业务处理模块与用户接口模块相连传输搜索请求信息和搜索结果信息；所述的数据存储模块获取并存储网络视频数据，包括：网络视频爬虫子模块和数据库子模块，其中：网络视频爬虫子模块和数据库子模块相连传输网络视频数据信息，网络视频爬虫子模块与业务处理模块相连传输运行配置信息，数据库子模块与业务处理模块相连传输数据库操作请求信息和数据库操作返回数据；所述的业务处理模块包括：搜索接口子模块、数据库操作子模块、网络视频热词分析子模块、用户兴趣模型管理子模块、网络视频地址探测子模块和系统配置管理子模块，其中：搜索接口子模块与用户接口模块相连传输搜索请求信息和搜索结果信息，数据库操作子模块与搜索接口子模块相连传输搜索条件信息和搜索返回信息，数据库操作子模块与网络视频热词分析子模块相连传输数据库操作信息和热词分析结果信息，数据库操作子模块与用户兴趣模型管理子模块相连传输数据库操作信息和用户兴趣模型更新信息，数据库操作子模块与网络视频地址探测子模块相连传输数据库操作信息和网络视频地址信息，系统配置管理子模块与用户兴趣模型管理子模块相连传输块运行配置信息，系统配置管理子模块与网络视频热词分析子模块相连传输运行配置信息，系统配置管理子模块与网络视频地址探测子模块相连传输运行配置信息，系统配置管理子模块与数据库操作子模块相连传输运行配置信息，系统配置管理子模块与网络视频爬虫子模块相连传输运行配置信息，数据库操作子模块与数据存储模块相连传输数据库存储信息。...

【技术特征摘要】

【专利技术属性】
技术研发人员：蒋兴浩，孙锬锋，傅光磊，李荣杰，冯冰，
申请(专利权)人：上海交通大学，
类型：发明
国别省市：31[中国|上海]