文档查询方法及装置制造方法及图纸

技术编号:24576557 阅读:50 留言:0更新日期:2020-06-21 00:27
本申请实施例提供一种文档查询方法及装置,在根据查询语句生成对应的单词序列之后,可以根据单词序列从倒排索引库中获得对应的文档信息,之后考虑到单词之间的语义关联性,进一步根据单词序列的查询长度、单词顺序以及文档信息,计算每个目标文档与单词序列之间的语义关联参数,并以此计算每个目标文档与单词序列之间的特征相似度得分后输出查询语句的文档查询结果。如此,能够很好地区分文档与查询语句中单词之间的语义关联性,避免语义理解偏差所带来的信息检索歧义,从而提高文档查询结果的准确率。

Document query method and device

【技术实现步骤摘要】
文档查询方法及装置
本申请涉及信息检索
,具体而言,涉及一种文档查询方法及装置。
技术介绍
当前,可以通过信息检索模型来获得文档与查询语句之间的相关性评分,但是在传统方案中,其局限性也显而易见:无法理解目标文档中的语义,从而难以很好地区分文档与查询语句中单词之间的语义关联性,由此获得的相关性得分并未考虑到单词之间的关联性,进而导致文档查询结果的准确率较低。
技术实现思路
有鉴于此,本申请的目的在于提供一种文档查询方法及装置,能够很好地区分文档与查询语句中单词之间的语义关联性,避免语义理解偏差所带来的信息检索歧义,从而提高文档查询结果的准确率。根据本申请的第一方面,提供一种文档查询方法,应用于存储有文档的服务器,所述服务器中预先配置有倒排索引库,所述倒排索引库包括文档中每个单词在各个文档的出现频率与出现位置,所述方法包括:根据查询语句生成对应的单词序列,并获得所述单词序列的查询长度和单词顺序;根据所述单词序列从所述倒排索引库中获得对应的文档信息,所述文档信息包括所述单词序列中每个单词出现的目标文档本文档来自技高网...

【技术保护点】
1.一种文档查询方法,其特征在于,应用于存储有文档的服务器,所述服务器中预先配置有倒排索引库,所述倒排索引库包括文档中每个单词在各个文档的出现频率与出现位置,所述方法包括:/n根据查询语句生成对应的单词序列,并获得所述单词序列的查询长度和单词顺序;/n根据所述单词序列从所述倒排索引库中获得对应的文档信息,所述文档信息包括所述单词序列中每个单词出现的目标文档以及每个单词在对应目标文档中的出现频率和出现位置;/n根据所述单词序列的查询长度、单词顺序以及所述文档信息,计算每个目标文档与所述单词序列之间的语义关联参数,并根据所述语义关联参数计算每个目标文档与所述单词序列之间的特征相似度得分;/n根据所...

【技术特征摘要】
1.一种文档查询方法,其特征在于,应用于存储有文档的服务器,所述服务器中预先配置有倒排索引库,所述倒排索引库包括文档中每个单词在各个文档的出现频率与出现位置,所述方法包括:
根据查询语句生成对应的单词序列,并获得所述单词序列的查询长度和单词顺序;
根据所述单词序列从所述倒排索引库中获得对应的文档信息,所述文档信息包括所述单词序列中每个单词出现的目标文档以及每个单词在对应目标文档中的出现频率和出现位置;
根据所述单词序列的查询长度、单词顺序以及所述文档信息,计算每个目标文档与所述单词序列之间的语义关联参数,并根据所述语义关联参数计算每个目标文档与所述单词序列之间的特征相似度得分;
根据所述每个目标文档与所述单词序列之间的特征相似度得分,输出所述查询语句的文档查询结果。


2.根据权利要求1所述的文档查询方法,其特征在于,所述根据查询语句生成对应的单词序列,并获得所述单词序列的查询长度和单词顺序的步骤,包括:
对所述查询语句进行分词,并剔除所述查询语句中的停用词,得到对应的单词序列;
获得所述单词序列的单词数量作为所述单词序列的查询长度,并根据所述单词序列中每个单词在所述查询语句中的出现顺序确定所述单词顺序。


3.根据权利要求1所述的文档查询方法,其特征在于,所述根据所述单词序列的查询长度、单词顺序以及所述文档信息,计算每个目标文档与所述单词序列之间的语义关联参数,并根据所述语义关联参数计算每个目标文档与所述单词序列之间的特征相似度得分的步骤,包括:
针对每个目标文档,根据所述单词序列的查询长度和单词顺序,以及所述单词序列中每个单词在该目标文档中的出现位置计算每个目标文档与所述单词序列之间的位置相关参数;
根据所述单词序列中每个单词在该目标文档中的出现位置和所述单词顺序计算该目标文档与所述单词序列之间的词序相关参数;
根据所述位置相关参数和所述词序相关参数计算该目标文档与所述单词序列之间的语义关联参数;
根据所述语义关联参数以及所述单词序列中每个单词在该目标文档中的出现频率,计算每个目标文档与所述单词序列之间的特征相似度得分。


4.根据权利要求3所述的文档查询方法,其特征在于,所述根据所述单词序列的查询长度和单词顺序,以及所述单词序列中每个单词在该目标文档中的出现位置计算每个目标文档与所述单词序列之间的位置相关参数的步骤,包括:
获取该目标文档中出现的所述单词序列中的单词种类数量;
根据所述单词种类数量、所述单词序列的单词顺序以及所述单词序列中每个单词在该目标文档中的出现位置,计算该目标文档中出现的各个所述单词之间的最小词间距之和;
根据所述单词序列的查询长度、所述单词种类数量以及所述最小词间距之和,得到该目标文档与所述单词序列之间的位置相关参数。


5.根据权利要求4所述的文档查询方法,其特征在于,所述根据所述单词种类数量、所述单词序列的单词顺序以及所述单词序列中每个单词在该目标文档中的出现位置,计算该目标文档中出现的各个所述单词之间的最小词间距之和的步骤,包括:
根据所述单词序列的单词顺序以及所述单词序列中每个单词在该目标文档中的出现位置生成对应的排序序列,所述排序序列中的每个元素分别按照该元素中的单词在该目标文档中的出现位置由前往后排列,每个元素用于表征单词编号与该单词在该目标文档中的出现位置之间的对应关系;
根据所述排序序列的序列长度和所述单词种类数量创建多个窗口,所述窗口的数量为所述序列长度与所述单词种类数量之差加一,每个窗口中可容纳的元素数量为所述单词种类数量;
从所述排序序列第一个元素起,遍历所述排序序列,依次将每个元素添加到第一个窗口,直到所述第一个窗口中的元素数量达到所述单词种类数量时,计算所述第一个窗口的第一个元素和最后一个元素之间的出现位置差;
从所述排序序列第二个元素起,遍历所述排序序列,依次将每个元素添加到下一个窗口,直到所述下一个窗口中的元素数量达到所述单词种类数量时,计算所述下一个窗口的第一个元素和最后一个元素之间的出现位置差,...

【专利技术属性】
技术研发人员:朱永强伍文成熊思宇
申请(专利权)人:成都网安科技发展有限公司
类型:发明
国别省市:四川;51

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1