一种建立多粒度词典的方法、分词的方法及其装置制造方法及图纸

本发明专利技术提供了一种建立多粒度词典的方法、分词的方法及其装置，其中建立多粒度词典的方法包括：A.收集原始词表；B.从原始词表中识别出基本词及词组词，分别形成基本词表和词组词表；C.确定与各词组词分别对应的从属词及子词组词，以将各词组词分别对应的从属词及子词组词作为与该词组词相关联的内部成分；D.将基本词及词组词存为词典词条，并将与各词组词相关联的内部成分存为对应词典词条的内部成分，得到多粒度词典。通过上述方式，能够建立统一的分词词典，以为各种应用提供支持。

【技术实现步骤摘要】

【技术保护点】
一种建立多粒度词典的方法，包括：A.收集原始词表；B.从原始词表中识别出基本词及词组词，分别形成基本词表和词组词表，其中基本词是仅包含一个表意单位的词，词组词是至少包含两个表意单位的词；C.确定与各词组词分别对应的从属词及子词组词，以将各词组词分别对应的从属词及子词组词作为与该词组词相关联的内部成分，其中从属词是与基本词表中的词相匹配的词，子词组词是由多个从属词构成、且与词组词表中的词相匹配的词；D.将基本词及词组词存为词典词条，并将与各词组词相关联的内部成分存为对应词典词条的内部成分，得到多粒度词典。

【技术特征摘要】

【专利技术属性】
技术研发人员：何径舟，王丽杰，
申请(专利权)人：北京百度网讯科技有限公司，
类型：发明
国别省市：