当前位置: 首页 > 专利查询>浙江大学专利>正文

一种基于跨模态稀疏主题建模的跨媒体检索方法技术

技术编号:9642410 阅读:477 留言:0更新日期:2014-02-07 00:57
本发明专利技术公开了一种基于跨模态稀疏主题建模的跨媒体检索方法。它包括如下步骤:1)对于已有的跨模态多媒体数据进行联合分析,提取其中的主题特征;2)基于已有的图像和文本特征,分析出其中主题与特征之间的稀疏关联,筛选特征与主体之间的相关性,并为跨模态多媒体文档提供相应的主题空间表示;3)根据用户检索的图像或文本信息,在稀疏主题空间中提供跨模态的多媒体检索同能,返回相关主题的图像和文本检索结果。由于本发明专利技术在对文本与图像进行投影时,采用稀疏的约束方式,使得每个主题相关的文本与图像特征更精确,因此可以获得更准确的检索结果。

【技术实现步骤摘要】
【专利摘要】本专利技术公开了。它包括如下步骤:1)对于已有的跨模态多媒体数据进行联合分析,提取其中的主题特征;2)基于已有的图像和文本特征,分析出其中主题与特征之间的稀疏关联,筛选特征与主体之间的相关性,并为跨模态多媒体文档提供相应的主题空间表示;3)根据用户检索的图像或文本信息,在稀疏主题空间中提供跨模态的多媒体检索同能,返回相关主题的图像和文本检索结果。由于本专利技术在对文本与图像进行投影时,采用稀疏的约束方式,使得每个主题相关的文本与图像特征更精确,因此可以获得更准确的检索结果。【专利说明】
本专利技术涉及多媒体检索,尤其涉及一种跨模态稀疏主题建模的跨媒体检索方法。
技术介绍
在传统的搜索引擎技术中,使用关键字搜索是最常用的一种检索手段,近年来兴起的图片搜索,即通过用户上传图像进行检索的方式也得到的广泛的应用,如商业引擎Google和Baidu都提出了具有较高搜索成功率的图像搜索引擎,其中Baidu还借助深度学习的技术,进一步提高了图像检索的成功率。在Web搜索的用户请求中,用户通常希望的到与搜索关键词或搜索图像相关的图像及关键字搜索结果。例如,用户请求“毒奶粉事件”,本文档来自技高网...

【技术保护点】
一种基于跨模态的稀疏主题建模的跨媒体检索方法,其特征在于包括如下步骤:1)?对于已有的跨模态多媒体数据进行联合分析,提取其中的主题特征;2)?基于已有的图像和文本特征,分析出其中主题与特征之间的稀疏关联,筛选特征与主体之间的相关性,并为跨模态多媒体文档提供相应的主题空间表示;3)?根据用户检索的图像或文本信息,在稀疏主题空间中提供跨模态的多媒体检索同能,返回相关主题的图像和文本检索结果。

【技术特征摘要】

【专利技术属性】
技术研发人员:吴飞王东辉王熙逵汤斯亮
申请(专利权)人:浙江大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1