一种基于深度学习的大数据搜索引擎制造技术

技术编号:43292759 阅读:27 留言:0更新日期:2024-11-12 16:11
本发明专利技术提供了一种基于深度学习的大数据搜索引擎,属于深度学习技术领域,包括:机制创建模块,用于基于大数据平台所采集的基于每种搜索格式下的搜索数据库创建搜索索引,并对所有搜索格式下的搜索索引进行分析建立索引机制;搜索模块,用于解析用户输入的搜索请求,并基于索引机制对解析结果进行分析得到初始搜索结果;日志截取模块,用于以用户的搜素请求的输入时刻为切入点截取每个意向索引所对应搜索格式在指定周期内的搜索日志;特征提取模块,用于对搜索日志进行特征提取来对相应意向索引的初始权重进行修正,并根据修正结果对初始搜索结果进行内部排序后输出。保证意向索引重要性的精准确定,进而保证结果的有序的输出,提高输出效率。

【技术实现步骤摘要】

本专利技术涉及深度学习,特别涉及一种基于深度学习的大数据搜索引擎


技术介绍

1、随着信息化技术的发展,尤其是社交网络、移动互联、物联网、大数据应用的迅速崛起和普及,人类社会发展所产生的数据呈现爆炸式增长。面对如此庞大的数据,如何从海量数据中精准获取需要的数据并对数据的重要性进行先后排序,是当今面临的一个挑战。

2、目前常见的搜索原理是采用高效的蜘蛛程序,从指定url开始顺着网页上的超链接,采用深度优先算法或广度优先算法对整个internet进行遍历,将网页信息抓取到本地数据库。然后使用索引器对数据库中的重要信息单元,如标题,关键字及摘要等或者全文进行索引,最后将索引结果直接进行输出,其中,在结果输出之前并不会对索引进行当下重要性的判断,导致输出结果混乱,并不能达到搜素后结果有序输出的目的。

3、因此,本专利技术提出一种基于深度学习的大数据搜索引擎。


技术实现思路

1、本专利技术提供一种基于深度学习的大数据搜索引擎,用以通过不同搜索格式下的搜索索引建立索引机制,为后续意向索引提供权重设本文档来自技高网...

【技术保护点】

1.一种基于深度学习的大数据搜索引擎,其特征在于,包括:

2.根据权利要求1所述的基于深度学习的大数据搜索引擎,其特征在于,所述机制创建模块,包括:

3.根据权利要求2所述的基于深度学习的大数据搜索引擎,其特征在于,所述机制创建模块,还包括:

4.根据权利要求1所述的基于深度学习的大数据搜索引擎,其特征在于,所述搜索模块,包括:

5.根据权利要求4所述的基于深度学习的大数据搜索引擎,其特征在于,

6.根据权利要求1所述的基于深度学习的大数据搜索引擎,其特征在于,所述日志截取模块,包括:

7.根据权利要求1所述的基于深...

【技术特征摘要】

1.一种基于深度学习的大数据搜索引擎,其特征在于,包括:

2.根据权利要求1所述的基于深度学习的大数据搜索引擎,其特征在于,所述机制创建模块,包括:

3.根据权利要求2所述的基于深度学习的大数据搜索引擎,其特征在于,所述机制创建模块,还包括:

4.根据权利要求1所述的基于深度学习的大数据搜索引擎,其特征在于,所述搜索模块,包括:

...

【专利技术属性】
技术研发人员:赵永丰史秀鹏闫顺琪屈春春齐超杜垚王豫江
申请(专利权)人:北京立同新元科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1