一种文本处理方法、装置及电子设备制造方法及图纸

技术编号:25599062 阅读:37 留言:0更新日期:2020-09-11 23:56
本申请公开了一种文本处理方法、装置及电子设备,方法包括:获得包含多个交互语句的交互文本;获得交互语句中包括实体词和触发词的二元组;获得二元组所在的交互语句的上下文语句中对应的至少一项人物关系描述词;至少将二元组与其对应的至少一项人物关系描述词输入到多分类模型中,以得到多分类模型输出的二元组对应的目标人物关系描述词;二元组中的实体词和触发词与二元组对应的目标人物关系描述词组成交互语句对应的三元组;其中,多分类模型利用至少P个具有二元组标签的第一语句样本训练得到,第一语句样本至少还具有二元组标签在所述第一语句样本的上下文语句中对应的人物关系描述词标签,P为所述人物关系描述词的种类个数。

【技术实现步骤摘要】
一种文本处理方法、装置及电子设备
本申请涉及文本处理
,尤其涉及一种文本处理方法、装置及电子设备。
技术介绍
在客服系统或者其他交互系统中,通常会记录用户之间的沟通记录,如语音或文本等。为了便于数据管理,通常需要对沟通记录的内容进行处理,由此得到总结性的内容。目前,通常采用实体和关系的联合抽取模型对沟通记录的内容进行三元组抽取,得到实体、触发词及角色组成的三元组,以三元组来表征沟通记录的总结内容。这种方案中的联合抽取模型通常是基于序列标注算法构建并训练的,在序列标注算法中依赖于具有人工标注有实体、角色和触发词的语句。例如,对于一般的篇章信息可以利用联合抽取模型对语句进行三元组提取,就能够得到完整的实体和关系的三元组信息,例如(中国,首都,北京)。但是在沟通记录的交互语句中可能会隐含人物指代关系,如“我当时生小孩的时候难产,后来又有了黄疸”,那么对于实体词和触发词(疾病,黄疸)对应的人物关系可能会识别成“我”,但实际上是“小孩”,因此,目前的抽取模型在对沟通内容的交互语句进行三元组抽取时存在抽取错误的情况,使得准确率较低。<本文档来自技高网...

【技术保护点】
1.一种文本处理方法,其特征在于,所述方法包括:/n获得交互文本,所述交互文本包含多个交互语句;/n获得所述交互语句中的二元组,所述二元组包括实体词和触发词;/n获得所述二元组所在的交互语句的上下文语句中对应的至少一项人物关系描述词;/n至少将所述二元组与其对应的至少一项人物关系描述词输入到预先训练的多分类模型中,以得到所述多分类模型输出的所述二元组对应的目标人物关系描述词;所述二元组中的实体词和触发词与所述二元组对应的目标人物关系描述词组成所述交互语句对应的三元组;/n其中,所述多分类模型利用至少P个具有二元组标签的第一语句样本训练得到,所述第一语句样本至少还具有所述二元组标签在所述第一语句...

【技术特征摘要】
1.一种文本处理方法,其特征在于,所述方法包括:
获得交互文本,所述交互文本包含多个交互语句;
获得所述交互语句中的二元组,所述二元组包括实体词和触发词;
获得所述二元组所在的交互语句的上下文语句中对应的至少一项人物关系描述词;
至少将所述二元组与其对应的至少一项人物关系描述词输入到预先训练的多分类模型中,以得到所述多分类模型输出的所述二元组对应的目标人物关系描述词;所述二元组中的实体词和触发词与所述二元组对应的目标人物关系描述词组成所述交互语句对应的三元组;
其中,所述多分类模型利用至少P个具有二元组标签的第一语句样本训练得到,所述第一语句样本至少还具有所述二元组标签在所述第一语句样本的上下文语句中对应的人物关系描述词标签,P为所述人物关系描述词的种类个数。


2.根据权利要求1所述的方法,其特征在于,获得所述交互语句中的二元组,包括:
将所述交互语句输入到预先训练的序列标注模型中,以得到所述序列标注模型所输出的二元组;
其中,所述序列标注模型利用至少两个具有实体词标签和触发词标签的第二语句样本训练得到。


3.根据权利要求1所述的方法,其特征在于,获得所述二元组所在的交互语句的上下文语句中对应的至少一项人物关系描述词,通过以下任意一种或任意多种方式实现:
在所述二元组在所述交互文本中对应的语句索引中,获得至少一项人物关系描述词;
在所述交互文本中,获得与所述二元组间隔最近的至少一项人物关系描述词;
在所述交互文本中的与所述二元组所在的交互语句前后相邻的交互语句中,获得至少一项人物关系描述词;
在所述交互文本中的在所述二元组所在的交互语句之前的交互语句中,获得至少一项人物关系描述词。


4.根据权利要求1或3所述的方法,其特征在于,所述方法还包括:
获得所述二元组中的实体词的属性特征和所述二元组在语法树中的人物主语描述词;
其中,至少将所述二元组与其对应的至少一项人物关系描述词输入到预先训练的多分类模型中,以得到所述多分类模型输出的所述二元组对应的目标人物关系描述词,包括:
将所述二元组与其对应的至少一项人物关系描述词、所述属性特征及所述任务主语描述词输入到预先训练的多分类模型中,以得到所述多分类模型输出的所述二元组对应的目标人物关系描述词。


5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
将所述三元组根据其中的目标人物关系描述词进行聚合,以使得具有相同的所述目标人物关系描述词的三元组处于同一三元组集合。


6.根据权利要求5所述的方法,其特征在于,所述三元组中还具有所述目标人物关系描述词对应的置信度值;
其中,所述方法还包括:
将所述三元组集合中的三元组所...

【专利技术属性】
技术研发人员:李思雯陈健崔文强
申请(专利权)人:深圳市慧择时代科技有限公司
类型:发明
国别省市:广东;44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1