System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 文本匹配方法、装置、计算机设备、存储介质、程序产品制造方法及图纸_技高网

文本匹配方法、装置、计算机设备、存储介质、程序产品制造方法及图纸

技术编号:41283669 阅读:5 留言:0更新日期:2024-05-11 09:33
本申请涉及一种文本匹配方法、装置、计算机设备、存储介质和计算机程序产品。所述方法包括:响应于文本查询请求,接收客户端输入的待匹配文本;基于所述待匹配文本携带的语义信息,将所述待匹配文本转换为对应的文本嵌入向量;利用所述文本嵌入向量在预设的向量数据库中进行相似度匹配,确定出与所述文本嵌入向量对应的目标向量;基于所述客户端当前选择的匹配模式和所述目标向量生成与所述待匹配文本对应的文本匹配结果,并将所述文本匹配结果返回至所述客户端。采用本方法能够提高文本匹配的匹配精度、效率和灵活性。

【技术实现步骤摘要】

本申请涉及文本匹配,特别是涉及一种文本匹配方法、装置、计算机设备、存储介质和计算机程序产品。


技术介绍

1、随着信息时代的发展,文本数据的处理变得越来越重要。其中,文本相似度匹配是搜索引擎、数据挖掘、知识管理等许多领域的关键技术。传统的文本相似度匹配方法主要基于关键词的匹配,如tf-idf算法(term frequency–inverse document frequency,一种基于词频和逆文本频率指数的匹配算法),bm25算法(okapi bm25,一种用于评估搜索词与文档之间相关性的算法)等。

2、但是,由于上述传统技术中的文本匹配方法过于依赖关键词,而容易忽略单词在文本中的语境和语义信息。因此在处理复杂的、含有大量同义词的文本时效果不佳。


技术实现思路

1、基于此,有必要针对上述技术问题,提供一种匹配精度更高的文本匹配方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。

2、第一方面,本申请提供了一种文本匹配方法,包括:

3、响应于文本查询请求,接收客户端输入的待匹配文本;

4、基于所述待匹配文本携带的语义信息,将所述待匹配文本转换为对应的文本嵌入向量;

5、利用所述文本嵌入向量在预设的向量数据库中进行相似度匹配,确定出与所述文本嵌入向量对应的目标向量;

6、基于所述客户端当前选择的匹配模式和所述目标向量生成与所述待匹配文本对应的文本匹配结果,并将所述文本匹配结果返回至所述客户端。

7、在其中一个实施例中,所述基于所述客户端当前选择的匹配模式和所述目标向量生成与所述待匹配文本对应的文本匹配结果,并将所述文本匹配结果返回至所述客户端,包括:

8、在所述匹配模式为第一模式的情况下,采用所述目标向量对应的文本数据生成所述文本匹配结果,并将所述文本匹配结果返回至所述客户端;

9、在所述匹配模式为第二模式的情况下,根据所述目标向量所在的向量聚类簇生成所述文本匹配结果,并将所述文本匹配结果返回至所述客户端。

10、在其中一个实施例中,所述向量聚类簇的生成方式,包括:

11、采集若干个样本文本,并将每个所述样本文本转换为对应的样本嵌入向量;

12、确定两两所述样本嵌入向量之间的向量相似度;

13、基于所述向量相似度和预设聚类阈值,对每个所述样本嵌入向量进行聚类,得到对应的向量聚类结果;

14、对同一所述向量聚类结果中的样本嵌入向量执行以下操作:根据每个所述样本嵌入向量与所述向量聚类结果的聚类中心之间的向量相似度,对每个所述样本嵌入向量进行排序,得到与每个所述样本嵌入向量对应的排序结果;

15、根据所述排序结果依次将所述向量聚类结果中的每个样本嵌入向量存储至所述向量数据库,形成所述向量聚类簇。

16、在其中一个实施例中,所述在所述匹配模式为第二模式的情况下,根据所述目标向量所在的向量聚类簇生成所述文本匹配结果,并将所述文本匹配结果返回至所述客户端,包括:

17、在所述匹配模式为第二模式的情况下,从所述目标向量所在的向量聚类簇中,确定出与所述目标向量的排序结果差异在预设阈值内的相似嵌入向量;

18、采用所述目标向量和所述相似嵌入向量对应的文本数据生成所述文本匹配结果,并将所述文本匹配结果返回至所述客户端。

19、在其中一个实施例中,所述基于所述待匹配文本携带的语义信息,将所述待匹配文本转换为对应的文本嵌入向量,包括:

20、利用预训练的深度学习模型对所述待匹配文本进行语义特征提取,得到所述待匹配文本的语义信息;

21、利用所述深度学习模型基于预设的语义向量映射,将所述语义信息转换为对应的所述文本嵌入向量。

22、在其中一个实施例中,所述利用所述文本嵌入向量在预设的向量数据库中进行相似度匹配,确定出与所述文本嵌入向量对应的目标向量,包括:

23、确定所述文本嵌入向量与所述向量数据库中的每个样本嵌入向量之间的向量距离;

24、基于所述向量距离,从所述向量数据库中确定出与所述文本嵌入向量对应的目标向量。

25、第二方面,本申请还提供了一种文本匹配装置,包括:

26、请求响应模块,用于响应于文本查询请求,接收客户端输入的待匹配文本;

27、向量转换模块,用于基于所述待匹配文本携带的语义信息,将所述待匹配文本转换为对应的文本嵌入向量;

28、相似度匹配模块,用于利用所述文本嵌入向量在预设的向量数据库中进行相似度匹配,确定出与所述文本嵌入向量对应的目标向量;

29、结果生成模块,用于基于所述客户端当前选择的匹配模式和所述目标向量生成与所述待匹配文本对应的文本匹配结果,并将所述文本匹配结果返回至所述客户端。

30、第三方面,本申请还提供了一种计算机设备。所述计算机设备包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述第一方面任一项实施例所述的文本匹配方法。

31、第四方面,本申请还提供了一种计算机可读存储介质。所述计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述第一方面任一项实施例所述的文本匹配方法。

32、第五方面,本申请还提供了一种计算机程序产品。所述计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现上述第一方面任一项实施例所述的文本匹配方法。

33、上述文本匹配方法、装置、计算机设备、存储介质和计算机程序产品,通过响应于文本查询请求,接收客户端输入的待匹配文本;基于待匹配文本携带的语义信息,将待匹配文本转换为对应的文本嵌入向量;利用文本嵌入向量在预设的向量数据库中进行相似度匹配,确定出与文本嵌入向量对应的目标向量;基于客户端当前选择的匹配模式和目标向量生成与待匹配文本对应的文本匹配结果,并将文本匹配结果返回至客户端,能够利用基于语义信息转换得到的嵌入向量实现文本之间的精确匹配,提高文本匹配方法的匹配精度。此外,采用本申请中提供的文本匹配方法时,由于使用了专为嵌入向量设计的向量数据库进行相似度检索,还能够大幅提升文本匹配效率。

本文档来自技高网...

【技术保护点】

1.一种文本匹配方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述基于所述客户端当前选择的匹配模式和所述目标向量生成与所述待匹配文本对应的文本匹配结果,并将所述文本匹配结果返回至所述客户端,包括:

3.根据权利要求2所述的方法,其特征在于,所述向量聚类簇的生成方式,包括:

4.根据权利要求3所述的方法,其特征在于,所述在所述匹配模式为第二模式的情况下,根据所述目标向量所在的向量聚类簇生成所述文本匹配结果,并将所述文本匹配结果返回至所述客户端,包括:

5.根据权利要求1至4任意一项所述的方法,其特征在于,所述基于所述待匹配文本携带的语义信息,将所述待匹配文本转换为对应的文本嵌入向量,包括:

6.根据权利要求1至4任意一项所述的方法,其特征在于,所述利用所述文本嵌入向量在预设的向量数据库中进行相似度匹配,确定出与所述文本嵌入向量对应的目标向量,包括:

7.一种文本匹配装置,其特征在于,所述装置包括:

8.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述的方法的步骤。

9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。

10.一种计算机程序产品,包括计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。

...

【技术特征摘要】

1.一种文本匹配方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述基于所述客户端当前选择的匹配模式和所述目标向量生成与所述待匹配文本对应的文本匹配结果,并将所述文本匹配结果返回至所述客户端,包括:

3.根据权利要求2所述的方法,其特征在于,所述向量聚类簇的生成方式,包括:

4.根据权利要求3所述的方法,其特征在于,所述在所述匹配模式为第二模式的情况下,根据所述目标向量所在的向量聚类簇生成所述文本匹配结果,并将所述文本匹配结果返回至所述客户端,包括:

5.根据权利要求1至4任意一项所述的方法,其特征在于,所述基于所述待匹配文本携带的语义信息,将所述待匹配文本转换为对应的文本嵌入向量,包括:

<...

【专利技术属性】
技术研发人员:雷浪声叶子鑫
申请(专利权)人:深圳威科未来科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1