一种事件文本过滤分析方法和系统技术方案

本发明专利技术涉及事件文本处理技术领域，提供一种事件文本过滤分析方法和系统，包括：通过训练获得的SimBERT句向量模型录入事件文本数据，采用SimBERT句向量模型对待过滤分析的当前事件进行相似性事件判别；通过正则筛选、依存句法分析和语句通顺性判断，对事件原始文本数据进行无效事件判别；通过正则筛选和实体位置信息抽取，对事件原始文本数据进行无位置事件判别。本发明专利技术的事件文本过滤分析方法和系统，可以提高数据处理的准确性和效率，有效避免误判和漏判现象的发生，更加灵活地实现事件文本的过滤分析。

【技术实现步骤摘要】

本专利技术涉及事件文本处理，尤其涉及一种事件文本过滤分析方法和系统。

技术介绍

1、随着城市治理的数字化转型，大量城市管理事件信息被采集和存储。如何准确、高效地处理这些事件信息，实现事件的实时监控、预警和决策支持，是当前城市治理领域亟待解决的问题。现有的城市治理数字化平台往往缺乏对事件文本的深入分析和有效过滤，导致事件处理效率低下，甚至可能引发误判和延误。

2、因此，如何提供一种城市治理数字化平台场景中的事件文本过滤分析方法，成为亟待解决的技术问题。

技术实现思路

1、有鉴于此，为了克服现有技术的不足，本专利技术旨在提供一种事件文本过滤分析方法和系统。

2、根据本专利技术的第一方面，提供一种事件文本过滤分析方法，该方法包括：

3、通过训练获得的simbert句向量模型录入事件文本数据，采用simbert句向量模型对待过滤分析的当前事件进行相似性事件判别；

4、通过正则筛选、依存句法分析和语句通顺性判断，对事件原始文本数据进行无效事件判别；p>

5、通过正本文档来自技高网...

【技术保护点】

1.一种事件文本过滤分析方法，其特征在于，所述方法包括：

2.根据权利要求1所述的事件文本过滤分析方法，其特征在于，通过训练获得的SimBERT句向量模型录入事件文本数据，采用SimBERT句向量模型对待过滤分析的当前事件进行相似性事件判别，包括：

3.根据权利要求2所述的事件文本过滤分析方法，其特征在于，构建语义相似性数据集，根据构建的语义相似性数据集训练获得SimBERT句向量模型，包括：

4.根据权利要求2所述的事件文本过滤分析方法，其特征在于，采用SimBERT句向量模型对录入的事件文本数据进行特征抽取，将事件对应的检索信息以及抽取的语义特征存...

【技术特征摘要】

1.一种事件文本过滤分析方法，其特征在于，所述方法包括：

2.根据权利要求1所述的事件文本过滤分析方法，其特征在于，通过训练获得的simbert句向量模型录入事件文本数据，采用simbert句向量模型对待过滤分析的当前事件进行相似性事件判别，包括：

3.根据权利要求2所述的事件文本过滤分析方法，其特征在于，构建语义相似性数据集，根据构建的语义相似性数据集训练获得simbert句向量模型，包括：

4.根据权利要求2所述的事件文本过滤分析方法，其特征在于，采用simbert句向量模型对录入的事件文本数据进行特征抽取，将事件对应的检索信息以及抽取的语义特征存储至向量数据库，包括：采用simbert句向量模型对清洗后的事件文本数据进行特征抽取，将事件对应的检索信息以及抽取的语义特征存储至向量数据库，所述检索信息包括事件的编号、发生事件、类别和地点信息。

5.根据权利要求2所述的事件文本过滤分析方法，其特征在于，采用simbert句向量模型对待过滤分析的当前事件文本进行特征抽取，根据抽取的语义特...

【专利技术属性】
技术研发人员：左健豪，朱金华，李鹏飞，
申请(专利权)人：中电云计算技术有限公司，
类型：发明
国别省市：