一种基于大数据检索和语义分析的快搜模型训练方法技术

本发明专利技术提出的一种基于大数据检索和语义分析的快搜模型训练方法，首先建立输入为检索信息，输出为检索关键词的快搜模型；根据检索信息的人工标注的检索关键词对快搜模型进行训练；对部分检索信息分别获取人工标注的检索关键词和快搜模型标注的检索关键词，再根据人工标注获取的检索结果与模型标注的检索结果的重合率对快搜模型进行验证。本发明专利技术保证了快搜模型最终获得的检索关键词无限接近检索信息的人工提炼结果，使得快搜模型可代替人工进行检索信息的分析提取，从而通过快搜模型的应用，避免了检索信息的人工分析工作，从而提高了检索关键词的提取效率，并降低了人工成本。

A fast search model training method based on big data retrieval and semantic analysis

【技术实现步骤摘要】
一种基于大数据检索和语义分析的快搜模型训练方法
本专利技术涉及
，尤其涉及一种基于大数据检索和语义分析的快搜模型训练方法。
技术介绍
随着互联网技术的发展，互联网资源的丰富日新月异。如此，互联网带动信息传播的同时，也由于网络信息过于丰富，造成了信息检索遇到了筛选难题。如何在海量的互联网数据中精确获得所需要的信息，是当前信息化时代不可忽视的问题。目前，信息检索，都是通过人工提炼关键词，然后根据检索结果对关键词进行修正，以达到预期的检索效果，人工成本过高，且效率低。
技术实现思路
基于
技术介绍
存在的技术问题，本专利技术提出了一种基于大数据检索和语义分析的快搜模型训练方法。本专利技术提出的一种基于大数据检索和语义分析的快搜模型训练方法，首先建立输入为检索信息，输出为检索关键词的快搜模型；根据检索信息的人工标注的检索关键词对快搜模型进行训练；对部分检索信息分别获取人工标注的检索关键词和快搜模型标注的检索关键词，再根据人工标注获取的检索结果与模型标注的检索结果的重合率对快搜模型进行验证。>优选的，具体包括以本文档来自技高网...

【技术保护点】
1.一种基于大数据检索和语义分析的快搜模型训练方法，其特征在于，首先建立输入为检索信息，输出为检索关键词的快搜模型；根据检索信息的人工标注的检索关键词对快搜模型进行训练；对部分检索信息分别获取人工标注的检索关键词和快搜模型标注的检索关键词，再根据人工标注获取的检索结果与模型标注的检索结果的重合率对快搜模型进行验证。/n

【技术特征摘要】
1.一种基于大数据检索和语义分析的快搜模型训练方法，其特征在于，首先建立输入为检索信息，输出为检索关键词的快搜模型；根据检索信息的人工标注的检索关键词对快搜模型进行训练；对部分检索信息分别获取人工标注的检索关键词和快搜模型标注的检索关键词，再根据人工标注获取的检索结果与模型标注的检索结果的重合率对快搜模型进行验证。


2.如权利要求1所述的基于大数据检索和语义分析的快搜模型训练方法，其特征在于，具体包括以下步骤：
S1、收集检索信息，并对检索信息进行人工分拣，提取检索关键词作为人工标注；
S2、随机抽取部分检索信息和对应的人工标注作为训练子集，并从剩余的检索信息中随机抽取部分检索信息和对应的人工标注作为修正子集；
S3、根据训练子集训练输入为检索信息，输出为检索关键词的快搜模型；
S4、从修正子集中抽取一条检索信息作为修正样本；
S5、根据快搜模型获取修正样本的模型标注，分别根据检索信息对应的模型标注和人工标注进行检索，获取模型标注检索结果与人工标注检索结果的重合率；
S6、判断重合率是否大于或者等于预设的检验阈值；
S7、是，统计修正次数；然后判断修正次数是否达到预设的修正阈值；否，则从修正子集中重新选择修正样本，然后返回步骤S5；是，则输出快搜模型；
S8、否，则更新训练子集和修正子集，并根据新的训练子集...

【专利技术属性】
技术研发人员：李颖，董霞，齐苗苗，
申请(专利权)人：合肥长远知识产权管理有限公司，
类型：发明
国别省市：安徽;34