【技术实现步骤摘要】
本申请涉及文本处理领域,具体而言,涉及一种摘要抽取方法、装置、电子设备及存储介质。
技术介绍
1、摘要抽取是自然语言处理领域中最重要的研究方向之一,其用于从文档中抽取出能够覆盖文档信息的重要句子。随着信息时代的快速发展,互联网上的数据量呈指数级增长。文本摘要技术通过对文本信息概括、总结,提炼出文章的主旨,利用文摘代替原文章参与索引,可以有效缩短检索的时间,同时也能减少检索结果中的冗余信息,能让用户从大量数据中高效地获取所需信息。
2、目前采用的摘要提取方法主要是通过将目标文档输入到异构超图构建层,构建摘要文档异构超图,并将其输入到异构超图更新层,得到更新异构超图,最后输入到句子分类层,得到从目标文档中抽取出的至少一个摘要句子。然而,上述摘要抽取方法通过构建摘要-文档异构超图以及对其进行更新来对输入文档进行编码,提取的特征上下文信息很弱,从而导致抽取得到的摘要准确性较低。
技术实现思路
1、本申请实施例的目的在于提供一种摘要抽取方法、装置、电子设备及存储介质,用以提高摘要抽取的准
本文档来自技高网...
【技术保护点】
1.一种摘要抽取方法,其特征在于,包括:
2.根据权利要求1所述的摘要抽取方法,其特征在于,所述句子位置信息嵌入层通过以下步骤生成所述待处理文本中的每个句子在所述待处理文本中的绝对位置信息:
3.根据权利要求1所述的摘要抽取方法,其特征在于,所述将所述待处理文本输入训练好的摘要抽取模型,得到所述待处理文本的摘要信息,包括:
4.根据权利要求3所述的摘要抽取方法,其特征在于,所述文本编码器还包括:BERT模型和Transformer编码器子结构层,所述BERT模型、所述句子位置信息嵌入层和所述Transformer编码器子结构层依次连
...【技术特征摘要】
1.一种摘要抽取方法,其特征在于,包括:
2.根据权利要求1所述的摘要抽取方法,其特征在于,所述句子位置信息嵌入层通过以下步骤生成所述待处理文本中的每个句子在所述待处理文本中的绝对位置信息:
3.根据权利要求1所述的摘要抽取方法,其特征在于,所述将所述待处理文本输入训练好的摘要抽取模型,得到所述待处理文本的摘要信息,包括:
4.根据权利要求3所述的摘要抽取方法,其特征在于,所述文本编码器还包括:bert模型和transformer编码器子结构层,所述bert模型、所述句子位置信息嵌入层和所述transformer编码器子结构层依次连接,所述将所述待处理文本输入所述文本编码器,所述文本编码器对所述待处理文本中的每个句子进行编码处理,得到所述待处理文本中的每个句子对应的具有文本级特征的句子表示,包括:
5.根据权利要求3所...
【专利技术属性】
技术研发人员:刘微,
申请(专利权)人:北京天融信网络安全技术有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。