【技术实现步骤摘要】
本专利技术涉及信息检索，具体为一种多源多模态数据的可视化搜索方法及系统。
技术介绍
1、多源多模态数据指的是来自不同数据源的不同类型的数据，不同类型包括文本，图像、视频和音频，可视化搜索方法是一种将搜索结果以可视化形式呈现给用户的技术，传统的文本搜索结果通常以列表或网格的形式展示，而可视化搜索方法可以通过图表、地图、图像等视觉化方式呈现搜索结果，使用户更直观地理解和发现信息。
2、多源多模态数据一般涵盖各种不同的数据类型和格式，例如图片、文本、音频、视频等，由于这些数据之间具有很大的异构性，数据类型都具有特定的表示形式和特征，不同数据类型的数据通常具有不同的数据结构，不同数据类型的数据其表示形式和组织方式各不相同，不同数据类型的数据具有不同的特征表达方式，因此在实现多模态数据的搜索时需要能够有效处理不同模态的数据，在处理多源多模态数据时，面临的关键问题是如何有效地整合来自不同数据源的多种类型数据，并建立跨模态之间的关联，为此专利技术了一种多源多模态数据的可视化搜索方法及系统。
技术实现思路
1、为本文档来自技高网...
【技术保护点】
1.一种多源多模态数据的可视化搜索方法，其特征在于，所述方法包括：
2.根据权利要求1所述的一种多源多模态数据的可视化搜索方法，其特征在于：所述多模态数据的预处理方法：
3.根据权利要求2所述的一种多源多模态数据的可视化搜索方法，其特征在于：所述特征提取包括：对于图像数据，使用卷积神经网络来提取图像特征，对于文本数据，通过自然语言处理技术提取文本特征，对于音频数据，通过梅尔频率倒谱系数提取音频的频谱特征和通过语言识别技术获得音频的音频文字特征。
4.根据权利要求1所述的一种多源多模态数据的可视化搜索方法，其特征在于：所述建立智能搜索
【技术特征摘要】
1.一种多源多模态数据的可视化搜索方法，其特征在于，所述方法包括：
2.根据权利要求1所述的一种多源多模态数据的可视化搜索方法，其特征在于：所述多模态数据的预处理方法：
3.根据权利要求2所述的一种多源多模态数据的可视化搜索方法，其特征在于：所述特征提取包括：对于图像数据，使用卷积神经网络来提取图像特征，对于文本数据，通过自然语言处理技术提取文本特征，对于音频数据，通过梅尔频率倒谱系数提取音频的频谱特征和通过语言识别技术获得音频的音频文字特征。
4.根据权利要求1所述的一种多源多模态数据的可视化搜索方法，其特征在于：所述建立智能搜索引擎的方法包括：
5.根据权利要求1所述的一种多源多模态数据的可视化搜索方法，其特征在于：所述建立智能搜索引擎的方法包括：
6.根据权利要求1所述的一种多源多模态数据的可视化搜索方法，其特征在于：所述二次筛选的方法包括，用户通过交互界面发出的搜索命令，人工智能技术利用自然语言处理技术对搜索命令...
【专利技术属性】
技术研发人员：安呈烜，贺俊龙，崔露，
申请(专利权)人：成都数据集团股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。