实体结构化及消歧的方法、设备及存储介质技术

技术编号:37151801 阅读:26 留言:0更新日期:2023-04-06 22:08
本发明专利技术提供实体结构化及消歧的方法、设备及存储介质,方法包括:收集文本数据;将其输入第一训练模型,以输出所有第一实体的标签分类;当标签分类为指代明确时,将其输入知识库,以输出最相近的结果;当指代不明确时,将其输入第二训练模型,以输出相关的关系分类,以及每个关系对应的另一第一实体;当存在等价关系时,将另一第一实体输入知识库,以输出最相近的结果;当仅存在相近关系时,将该实体以及与另一实体输入知识库,以输出最相近的结果,作为指代不明确的第一实体的消歧结果。该方法利用实体的关联关系,以及结合知识库可对文本数据中的第一实体进行进一步补充以及结构化,能够有效消除不清晰实体的歧义。够有效消除不清晰实体的歧义。够有效消除不清晰实体的歧义。

【技术实现步骤摘要】
实体结构化及消歧的方法、设备及存储介质


[0001]本专利技术涉及文本消歧领域,更具体地,涉及实体结构化及消歧的方法、设备及存储介质。

技术介绍

[0002]文本数据的理解中,常出现的问题为文本中各个实体容易存在歧义,例如当文本数据中出现代词时,容易混淆代词所指的是哪一个实体,又例如是文本数据中出现多种指称时,容易混淆不同的指称是否指的是同一个实体,例如“家”的这一个指称,是与上文中的“某某小区x栋xx房”的这一指称指的是同一个实体。当有前述情况出现时,文本数据的理解容易造成多处的歧义,不利于文本数据的理解分析以及应用,当文本数据中出现指代不清晰的实体时,现有技术中也没有对其进行补全或结构化,没有考虑到实体之间存在关联关系,整体来说在文本数据消除歧义的这一方面,现有技术并不完善。

技术实现思路

[0003]本专利技术旨在克服上述现有技术的至少一种缺陷,提供实体结构化及消歧的方法、设备及存储介质,用于解决现有技术中对文本数据消除歧义的过程中没有考虑到实体之间存在关联关系导致不完善的问题。
[0004]本专利技术采用的技术方本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种实体结构化及消歧的方法,其特征在于,包括:收集文本数据;所述文本数据中包括若干个第一实体;将所述文本数据输入已训练的第一训练模型,以使所述第一训练模型输出文本数据中所有第一实体的标签分类;标签分类包括指代明确和指代不明确;当所述第一实体的标签分类为指代明确时,将指代明确的第一实体输入已构建的实体结构化知识库,以使所述实体结构化知识库输出与指代明确的第一实体最相近的结果,作为所述指代明确的第一实体的消歧结果;当所述第一实体的标签分类为指代不明确时,将指代不明确的第一实体输入已训练的第二训练模型,以使所述第二训练模型输出与其相关的关系分类,以及每个相关的关系分类对应的另一第一实体;关系分类包括等价关系和相似关系;当指代不明确的第一实体存在等价关系的关系分类时,将与其存在等价关系的另一第一实体输入已构建的实体结构化知识库,以使所述实体结构化知识库输出与所述另一第一实体最相近的结果,作为所述指代不明确的第一实体的消歧结果;当指代不明确的第一实体仅存在相近关系的关系分类时,将所述指代不明确的第一实体以及与其存在相近关系的另一实体输入已构建的实体结构化知识库,以使所述实体结构化知识库输出与所述指代不明确的第一实体以及所述另一第一实体都最相近的结果,作为所述指代不明确的第一实体的消歧结果。2.根据权利要求1所述的实体结构化及消歧的方法,其特征在于,将指代明确的第一实体输入已构建的实体结构化知识库,以使所述实体结构化知识库输出与指代明确的第一实体最相近的结果,具体包括:将指代明确的第一实体输入已构建的实体结构化知识库后,将指代明确的第一实体与实体结构化知识库中的实体数据进行表征向量相似度计算,将相似度最高的实体数据作为与指代明确的第一实体最相近的结果输出;将与其存在等价关系的另一第一实体输入已构建的实体结构化知识库,以使所述实体结构化知识库输出与所述另一第一实体最相近的结果,具体包括:将与其存在等价关系的另一第一实体输入已构建的实体结构化知识库后,将与其存在等价关系的另一第一实体与实体结构化知识库中的实体数据进行表征向量相似度计算,将相似度最高的实体数据作为与所述另一第一实体最相近的结果输出。3.根据权利要求1所述的实体结构化及消歧的方法,其特征在于,将所述指代不明确的第一实体以及与其存在相近关系的另一实体输入已构建的实体结构化知识库,以使所述实体结构化知识库输出与所述指代不明确的第一实体以及所述另一第一实体都最相近的结果,具体包括:将所述指代不明确的第一实体以及与其存在相近关系的另一实体拼接后输入已构建的实体结构化知识库,将所拼接的实体数据与实体结构化知识库中的实体数据进行表征向量相似度计算,将相似度最高的实体数据作为与所述指代不明确的第一实体以及所述另...

【专利技术属性】
技术研发人员:李健民曾婷欧阳滨滨林梓陆高唯唯陈益祥柳子用邱述洪
申请(专利权)人:联通广东产业互联网有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1