【技术实现步骤摘要】
基于上下文相关词分量的语言处理方法和系统
[0001]本申请涉及网络多媒体领域,尤其涉及一种基于上下文相关词分量的语言处理方法和系统。
技术介绍
[0002]词向量是机器学习自然语言处理必不可少的基础,然而现有的词向量是对一个词汇的静态假设,虽然可以在建模上降低复杂度,但是却忽略了一个词汇在不同上下文中的语法差异。
[0003]因此,急需一种针对性的基于上下文相关词分量的语言处理方法和系统。
技术实现思路
[0004]本专利技术的目的在于提供一种基于上下文相关词分量的语言处理方法和系统,通过将语句输入句法模型中,进行断句,得到第一词分量,并分别与上一句和下一句语句做关联计算,确定上下文内容,将所述第一词分量逐个输入语义分析模型,并将其上下文内容作为所述语义分析模型的参考输入,得出所述第一词分量对应的词含义,通过对上下文内容的词含义做出预测,可以实现对第一词分量对应的词含义的修正。
[0005]第一方面,本申请提供一种基于上下文相关词分量的语言处理方法,所述方法包括:
[0006]获取网 ...
【技术保护点】
【技术特征摘要】
1.一种基于上下文相关词分量的语言处理方法,其特征在于,所述方法包括:获取网络数据流,从中提取出语句,将所述语句输入句法模型中,进行断句,得到并缓存第一词分量,将所述第一词分量与上一句语句做关联计算,根据关联度大小,确定所述第一词分量的上文内容;在下一次断句时,提取所述缓存的第一词分量与下一句语句做关联计算,根据关联度大小,确定所述第一词分量的下文内容;将所述第一词分量逐个输入语义分析模型,并将所述第一词分量的上下文内容作为所述语义分析模型的参考输入,得出所述第一词分量对应的词含义;其中,所述语义分析模型包括:语义分析参考输入的上下文内容,得出对应的上下文词含义,预测得出所述上下文词含义对应的第二词含义,将所述第二词含义与所述第一词分量直接语义得出的词含义比较,计算方差值,将所述方差值作为系数,修正所述第一词分量对应的词含义;输出所述第一词分量对应的词含义到服务器,进行关键词检测。2.根据权利要求1所述的方法,...
【专利技术属性】
技术研发人员:苏长君,曾祥禄,
申请(专利权)人:北京智美互联科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。