数据搜索方法、装置、设备及存储介质制造方法及图纸

技术编号:26342709 阅读:38 留言:0更新日期:2020-11-13 20:37
本申请实施例公开了一种数据搜索方法、装置、设备及存储介质,属于人工智能技术领域。所述方法包括:获取搜索文本;对搜索文本进行切词处理,得到至少一个单粒度词,单粒度词是指包含单个信息量的词;分别对单粒度词进行实体识别处理和相邻单粒度词合并处理,得到至少一个多粒度词,多粒度词是指包含多个单粒度词的词;基于单粒度词和多粒度词,确定搜索文本对应的搜索结果。本申请实施例通过结合单粒度词和多粒度词确定搜索结果,搜索的时候不仅考虑了单粒度词,而且还考虑了多粒度词,提高了紧邻结果被优先召回的概率,使得最终的搜索结果与搜索文本更相关,从而提高了搜索准确率。

Data search method, device, equipment and storage medium

【技术实现步骤摘要】
数据搜索方法、装置、设备及存储介质
本申请实施例涉及人工智能
,特别涉及一种数据搜索方法、装置、设备及存储介质。
技术介绍
随着互联网技术的发展,用户可以在浏览器中输入搜索文本,以使得浏览器基于该搜索文本显示搜索结果。在相关技术中,浏览器中的搜索引擎首先会调用分词模型对用户输入的搜索文本进行切分,得到至少一个单粒度词;然后搜索引擎会基于上述至少一个单粒度词在倒排文件中进行搜索,得到上述至少一个单粒度词分别对应的倒排列表;然后搜索引擎会对上述至少一个单粒度词分别对应的倒排列表进行求交集处理,得到上述搜索文本对应的搜索结果;最后搜索引擎将该搜索结果反馈给用户。然而,上述搜索引擎直接基于每个单粒度词分别对应的倒排列表进行搜索,由于倒排列表较长,会导致最终截取的搜索结果准确率较差。
技术实现思路
本申请实施例提供了一种数据搜索方法、装置、设备及存储介质,提高了搜索准确率。技术方案如下:根据本申请实施例的一个方面,提供一种数据搜索方法,所述方法包括:获取搜索文本;对所述搜索文本进行切词处理本文档来自技高网...

【技术保护点】
1.一种数据搜索方法,其特征在于,所述方法包括:/n获取搜索文本;/n对所述搜索文本进行切词处理,得到至少一个单粒度词,所述单粒度词是指包含单个信息量的词;/n分别对所述单粒度词进行实体识别处理和相邻单粒度词合并处理,得到至少一个多粒度词,所述多粒度词是指包含多个单粒度词的词;/n基于所述单粒度词和所述多粒度词,确定所述搜索文本对应的搜索结果。/n

【技术特征摘要】
1.一种数据搜索方法,其特征在于,所述方法包括:
获取搜索文本;
对所述搜索文本进行切词处理,得到至少一个单粒度词,所述单粒度词是指包含单个信息量的词;
分别对所述单粒度词进行实体识别处理和相邻单粒度词合并处理,得到至少一个多粒度词,所述多粒度词是指包含多个单粒度词的词;
基于所述单粒度词和所述多粒度词,确定所述搜索文本对应的搜索结果。


2.根据权利要求1所述的方法,其特征在于,所述基于所述单粒度词和所述多粒度词,确定所述搜索文本对应的搜索结果,包括:
获取各个所述单粒度词分别对应的倒排列表;其中,所述单粒度词对应的倒排列表中包括至少一个第一文档的标识,所述第一文档中包括所述单粒度词;
获取各个所述多粒度词分别对应的倒排列表;其中,所述多粒度词对应的倒排列表中包括至少一个第二文档的标识,所述第二文档中包括所述多粒度词;
对各个所述单粒度词分别对应的倒排列表以及各个所述多粒度词分别对应的倒排列表进行处理,得到合并倒排列表;
基于所述合并倒排列表确定所述搜索文本对应的搜索结果。


3.根据权利要求2所述的方法,其特征在于,所述对各个所述单粒度词分别对应的倒排列表以及各个所述多粒度词分别对应的倒排列表进行合并处理,得到合并倒排列表,包括:
对各个所述单粒度词分别对应的倒排列表进行求交集处理,得到交集倒排列表,所述交集倒排列表中包括至少一个第三文档的标识,所述第三文档中包括各个所述单粒度词;
对所述交集倒排列表和各个所述多粒度词分别对应的倒排列表进行求并集处理,得到所述合并倒排列表。


4.根据权利要求3所述的方法,其特征在于,所述基于所述合并倒排列表确定所述搜索文本对应的搜索结果,包括:
将所述合并倒排列表包括的所述至少一个第二文档的标识排在所述至少一个第三文档的标识之前,得到排序后的所述合并倒排列表;
基于排序后的所述合并倒排列表顺序确定所述搜索文本对应的搜索结果。


5.根据权利要求1所述的方法,其特征在于,所述分别对所述单粒度词进行实体识别处理和相邻单粒度词合并处理,得到至少一个多粒度词,包括:
对所述单粒度词进行实体识别处理,得到实体词集合,所述实体词集合包括单粒度实体词和多粒度实体词;
选取所述实体词集合中的所述多粒度实体词,得到多粒度实体词集合;
对所述单粒度词进行相邻单粒度...

【专利技术属性】
技术研发人员:赵铭鑫黄斌朱健琛李晨黄泽谦王一径罗勋朱宗磊
申请(专利权)人:腾讯科技深圳有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1