一种问答对的评价方法、装置、存储介质及设备制造方法及图纸

本申请公开了一种问答对的评价方法、装置、存储介质及设备，该方法包括：首先根据待评价问答对中问题的分词数量生成第一评价指标，根据待评价问答对中主题与答案之间的相关性生成第二评价指标，以及根据待评价问答对中答案的字数生成第三评价指标，然后，再利用预先构建的问答对评价模型，对第一评价指标、第二评价指标、第三评价指标进行评价，以获得待评价问答对的质量，相比于人工评价的方式，可以实现快速且准确地获得待评价问答对的质量，且评价的结果消除了人工评价的主观性带来的影响，并且由于本申请在评价问答对时，考虑了待评价问答对中问题的分词数量、主题与答案之间的相关性以及答案的字数，因此能够更准确地评价出问答对的质量。

An evaluation method, device, storage medium and equipment for Q & A

【技术实现步骤摘要】
一种问答对的评价方法、装置、存储介质及设备
本申请涉及自然语言理解领域，尤其涉及一种问答对的评价方法、装置、存储介质及设备。
技术介绍
智能问答是人工智能领域里的一项重要应用，相较于传统的人工客服系统，智能问答系统具有高效率、低成本等诸多优势，目前越来越多的企业使用智能问答系统为用户提供对话服务，以提升用户服务满意度。在实际应用中，当智能问答系统接收到用户提出的问题时，智能问答系统会从预先构建的知识库中自动查询出该问题对应的答案，返回至用户。其中，预先构建的知识库中存储有大量由多个问题和与每个问题相对应的答案构成的问答对。每一问答对中答案对于问题回复的准确率越高，说明该问答对的质量越高，智能问答系统在依据其进行答复时，回复的质量也就越高。因此，为了提高智能问答系统的回复准确率，需要不断扩充知识库中问答对的存储量和覆盖的领域范围。目前在扩充知识库时，通常是采用多人协作或文档抽取问答对的方式，即，采用多个人同时向知识库添加问答对或从文档中自动抽取问答对的方式，但当多个人同时向知识库中添加问答对时，容易受到个人主观因素影响，添加的问答本文档来自技高网...

【技术保护点】
1.一种问答对的评价方法，其特征在于，包括：/n根据待评价问答对中问题的分词数量生成第一评价指标；根据所述待评价问答对中主题与答案之间的相关性生成第二评价指标；根据所述待评价问答对中答案的字数生成第三评价指标；所述待评价问答对包括问题和答案；所述待评价问答对中的主题是从所述问题提取的；/n利用预先构建的问答对评价模型，对所述待评价问答对的第一评价指标、所述第二评价指标、所述第三评价指标进行评价，获得所述待评价问答对的质量。/n

【技术特征摘要】
1.一种问答对的评价方法，其特征在于，包括：
根据待评价问答对中问题的分词数量生成第一评价指标；根据所述待评价问答对中主题与答案之间的相关性生成第二评价指标；根据所述待评价问答对中答案的字数生成第三评价指标；所述待评价问答对包括问题和答案；所述待评价问答对中的主题是从所述问题提取的；
利用预先构建的问答对评价模型，对所述待评价问答对的第一评价指标、所述第二评价指标、所述第三评价指标进行评价，获得所述待评价问答对的质量。


2.根据权利要求1所述的方法，其特征在于，所述根据待评价问答对中问题的分词数量生成第一评价指标，包括：
利用条件随机场CRF分词模型，对所述待评价问答对中的问题进行分词，得到第一分词结果；
计算所有两个相邻分词之间的互信息值；并根据所述互信息值，对所述第一分词结果进行分词，得到第二分词结果；
获得所述第二分词结果中的分词数量，作为所述待评价问答对的第一评价指标。


3.根据权利要求1所述的方法，其特征在于，所述根据所述待评价问答对中主题与答案之间的相关性生成第二评价指标，包括：
获得所述待评价问答对中主题与答案之间的余弦相似度，作为所述待评价问答对的第二评价指标。


4.根据权利要求1至3任一项所述的方法，其特征在于，所述方法还包括：
获取所述待评价问答对所属领域的样本问答对；
利用所述样本问答对，对预先构建的初始问答对评价模型进行训练，得到所述问答对评价模型。


5.根据权利要求4所述的方法，其特征在于，所述方法还包括:
根据所述样本问答对中问题的分词数量生成第一评价指标；根据所述样本问答对中主题与答案之间的相关性生成第二评价指标；根据所述样本问答对中答案的字数生成第三评价指标；
对所述样本问答对的第一评价指标、第二评价指标以及第三评价指标分别进行分类，得到各个评价指标对应的分类结果；
根据所述各个评价指标对应的分类结果，构建对应的决策树模型，作为初始问答对评价模型。


6.根据权利要求4所述的方法，其特征在于，所述方法还包括...

【专利技术属性】
技术研发人员：陈建华，崔朝辉，赵立军，张霞，
申请(专利权)人：东软集团股份有限公司，
类型：发明
国别省市：辽宁;21