【技术实现步骤摘要】
本公开涉及一种相似文本检测方法、电子设备、存储介质及程序产品。
技术介绍
1、随着互联网和数字化技术的迅猛发展，各种信息呈指数级别急剧增长，而文本数据是其中一个重要部分。海量的文本数据不仅给用户造成信息过载，也给信息管理、搜索等带来了巨大的挑战。为了提升文本数据质量、减少数据量，相似文本检测技术应运而生。
2、现有技术中进行相似文本检测时，需要计算目标文本与文本集中每个文本的相似度。
3、然而，当文本集中文本的数量较多时，逐一计算相似度的计算量较大，相似文本检测的效率低下。
技术实现思路
1、本公开提供了一种相似文本检测方法、装置、电子设备及存储介质。
2、根据本公开的一个方面，提供一种相似文本检测方法，包括：
3、获取目标文本和第一文本集；
4、对所述目标文本进行处理，得到目标文本特征；
5、根据分割数对所述目标文本特征进行分割，得到目标子特征；
6、根据所述目标子特征中的分特征及其对应的分表从所述第一文本集中获取第二文本集；
7、使用所述目标文本、第二文本集和预设相似阈值进行相似文本检测，
8、其中，所述分割数与所述预设相似阈值对应；分特征对应的分表属于映射表，所述映射表根据所述第一文本集中第一文本对应的第一子特征确定。
9、根据本公开的至少一个实施方式的相似文本检测方法，所述根据所述目标子特征中的分特征及其对应的分表从所述第一文本集中获取第二文本集，包括：<...
【技术保护点】
1.一种相似文本检测方法，其特征在于，包括：
2.根据权利要求1所述的相似文本检测方法，其特征在于，所述根据所述目标子特征中的分特征及其对应的分表从所述第一文本集中获取第二文本集，包括：
3.根据权利要求1或2所述的相似文本检测方法，其特征在于，在从所述映射表中获取所述第一分特征对应的第一分表之前，还包括：
4.根据权利要求1或2所述的相似文本检测方法，其特征在于，在所述根据分割数对所述目标文本特征进行分割之前，还包括：
5.根据权利要求1或2所述的相似文本检测方法，其特征在于，
6.一种相似文本检测方法，其特征在于，包括：
7.根据权利要求6所述的相似文本检测方法，其特征在于，还包括：
8.一种电子设备，其特征在于，包括：
9.一种可读存储介质，其特征在于，所述可读存储介质中存储有执行指令，所述执行指令被处理器执行时实现如权利要求1至7中任一项所述的相似文本检测方法。
10.一种计算机程序产品，包括计算机程序/指令，其特征在于，所述计算机程序/指令被处理器执行时实现权利要
...【技术特征摘要】
1.一种相似文本检测方法，其特征在于，包括：
2.根据权利要求1所述的相似文本检测方法，其特征在于，所述根据所述目标子特征中的分特征及其对应的分表从所述第一文本集中获取第二文本集，包括：
3.根据权利要求1或2所述的相似文本检测方法，其特征在于，在从所述映射表中获取所述第一分特征对应的第一分表之前，还包括：
4.根据权利要求1或2所述的相似文本检测方法，其特征在于，在所述根据分割数对所述目标文本特征进行分割之前，还包括：
5.根据权利要求1或2所述的相似文本检测方法...
【专利技术属性】
技术研发人员：汪泽西，宋熙康，李媛媛，
申请(专利权)人：上海墨百意信息科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。