【技术实现步骤摘要】
文本处理装置、方法、设备以及计算机可读存储介质
本公开涉及文本处理领域,并且具体涉及一种文本处理装置、方法、设备以及计算机可读存储介质。
技术介绍
在现有的文本处理,例如文本转换、文本生成等过程中,可以通过对输入的源文本进行处理以得到最终的文本处理结果。在一些情况下,为了得到更理想的结果,用户可以为文本处理过程指定一些外部信息,这样的外部信息可以是用户指定的文本中的重要的信息,也可以是与源文本相关联的其他文本的信息。为了使得这样的外部信息更可能出现在文本处理结果中,需要一种在文本处理过程中充分考虑外部信息的文本处理方法。
技术实现思路
为了在文本处理过程中充分考虑外部信息,本公开提供了一种文本处理方法、装置、设备以及计算机可读存储介质。根据本公开的一个方面,提供了一种文本处理装置,包括:编码单元,配置成对所述源文本进行编码以得到源文本编码隐藏状态;解码单元,配置成确定解码隐藏状态;输出单元,配置成根据所述源文本编码隐藏状态和所述解码隐藏状态确定每个时间步的输出词语,以确定候选文本;以及后处 ...
【技术保护点】
1.一种文本处理装置,包括:/n编码单元,配置成对所述源文本进行编码以得到源文本编码隐藏状态;/n解码单元,配置成确定解码隐藏状态;/n输出单元,配置成根据所述源文本编码隐藏状态和所述解码隐藏状态确定每个时间步的输出词语,以确定候选文本;以及/n后处理单元,配置成根据外部信息对所述候选文本进行后处理,以确定包含外部信息的输出文本。/n
【技术特征摘要】
1.一种文本处理装置,包括:
编码单元,配置成对所述源文本进行编码以得到源文本编码隐藏状态;
解码单元,配置成确定解码隐藏状态;
输出单元,配置成根据所述源文本编码隐藏状态和所述解码隐藏状态确定每个时间步的输出词语,以确定候选文本;以及
后处理单元,配置成根据外部信息对所述候选文本进行后处理,以确定包含外部信息的输出文本。
2.如权利要求1所述的文本处理装置,其中所述外部信息是包含预定义的信息的句子,所述后处理单元配置成:
确定所述候选文本中的句子和所述外部信息的相似度;
当所述相似度大于等于预设的候选相似度阈值时,将所述候选文本中的所述句子替换为所述外部信息。
3.如权利要求2所述的文本处理装置,其中,将所述候选文本中的所述句子替换为所述外部信息包括:
删除所述候选文本中的所述句子;
根据所述外部信息和所述候选文本中的剩余信息在所述源文本中的相关性,在所述剩余信息中插入外部信息。
4.如权利要求2所述的文本处理装置,所述后处理单元还配置成:
当所述相似度小于预设的候选相似度阈值时,根据所述外部信息和所述候选文本中的句子在所述源文本中的相关性,在所述候选文本中插入外部信息。
5.如权利要求1-4任一项所述的文本处理装置,还包括:
注意力生成单元,配置成根据外部信息、所述源文本编码隐藏状...
【专利技术属性】
技术研发人员:关雅卓,郭垿宏,刘天赏,郭心语,李安新,陈岚,池田大志,藤本拓,
申请(专利权)人:株式会社NTT都科摩,
类型:发明
国别省市:日本;JP
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。