【技术实现步骤摘要】
主观题评分方法、模型的训练方法、计算机设备及存储介质
[0001]本申请涉及自然语言处理
,尤其涉及一种主观题评分方法、模型的训练方法、计算机设备及存储介质。
技术介绍
[0002]考试自动评分目前已经成为了学术界和工业界里非常热门的方向之一,机器对考生作答文本进行处理分析,给出评分结果。在大规模考试中,机器评分结果接近人工评分,能够有效减轻教师负担,降低人工成本。本案面向其中的要点主观题。
[0003]主观题(又名简答题)是相对于客观题(又名选择题)而言的一种题型,需要考生分析理解问题的题意,根据所学知识、材料内容、生活常识等进行提炼归纳,自主书写阐述答案文本。考察考生的知识积累能力,对材料的阅读归纳分析提炼能力,以及对生活的认知程度。对考生分析总结能力,语言表达能力,思维创新能力有比较严格的要求,但同时评分相较之客观题,容易受到阅卷人的主观因素影响。
[0004]举例而言,要点主观题为主观题中的一类,其特点为标准答案相对唯一,且包含多个要点和对应分值。要点主观题举例如下,题干为:“QQ。”,标准答案 ...
【技术保护点】
【技术特征摘要】
1.一种主观题评分方法,其特征在于,包括:获取标准答案中的若干要点文本和每个所述要点文本的要点满分分值;获取考生作答文本;对所述要点文本和所述考生作答文本进行匹配处理,得到所述考生作答文本与所述要点文本的匹配程度;根据每个所述要点文本的要点满分分值,及所述考生作答文本与每个所述要点文本的匹配程度,确定所述考生作答文本对应的作答分值。2.如权利要求1所述的主观题评分方法,其特征在于,所述对所述要点文本和所述考生作答文本进行匹配处理,得到所述考生作答文本与所述要点文本的匹配程度,包括:基于要点匹配模型的词嵌入子网络,对所述要点文本和所述考生作答文本进行词嵌入处理,得到文本向量;基于所述要点匹配模型的多头自注意力子网络,对所述文本向量进行处理,得到所述文本向量的隐层表示;基于所述要点匹配模型的第一匹配子网络,根据所述文本向量的隐层表示,得到所述考生作答文本与所述要点文本的匹配程度。3.如权利要求2所述的主观题评分方法,其特征在于,在所述基于所述要点匹配模型的多头自注意力子网络,对所述文本向量进行处理,得到所述文本向量的隐层表示之后,所述方法还包括:基于所述要点匹配模型的第二匹配子网络,根据所述文本向量的隐层表示,得到所述考生作答文本中与所述要点文本匹配的文本片段;根据所述考生作答文本的标注的与所述要点文本的匹配程度和标注的匹配的文本片段,以及基于所述第一匹配子网络得到的匹配程度和基于所述第二匹配子网络得到的文本片段,对所述要点匹配模型的参数进行调整。4.如权利要求1
‑
3中任一项所述的主观题评分方法,其特征在于,所述根据每个所述要点文本的要点满分分值,及所述考生作答文本与每个所述要点文本的匹配程度,确定所述考生作答文本对应的作答分值,包括:根据所述考生作答文本与每个所述要点文本的匹配程度,对每个所述要点文本的要点满分分值进行加权求和,得到所述考生作答文本对应的要点匹配得分率;基于预设的特征提取规则,根据所述标准答案和所述考生作答文本,确定所述考生作答文本对应的预设特征;将所述要点匹配得分率和所述预设特征输入预设的评分模型,得到所述考生作答文本对应的作答分值。5.如权利要求4所述的主观题评分方法,其特征在于,所述基于预设的特征提取规则,根据所述标准答案和所述考生作答文本,确定所述考生作答文本对应的预设特征,包括以下至少一项:根据所述标准答案的长度和所述考生作答文本的长度,确定所述考生作答文本对应的长度特征;根据所述标准答案中的字/词是否在所述考生作答文本中出现,确定所述考生作答文本对应的字词覆盖度;
根据所述标准答案中的字/词的词向量和所述考生作答文本中字/词的词向量,确定所述考生作答文本对应的词向量相似度;根据考生作答文本中与所述标准答案中相同的子串,确定所述考生作答文本对应的最小公共子串长度比;基于预设的编辑规则,根据所述考生作答文本和所述标准答案,确定所述考生作答文本与所述标准答案之间的编辑距离。6.如权利要求1
‑
3中任一项所述的主观题评分方法,其特征在于,所述根据每个所述要点文本的要点满分分值,及所述考生作答文本与每个所述要点文本的匹配程度,确定所述考生作答文本对应的作答分值,包括:根据所述考生作答文本与每个所述要点文本的匹配程度,对每个所述要点文本的要点满分分值进行加权求和;根据所述加权求和的结果,与所述标准答案的标准分值,确定所述考生作答文本对应的作答分值。7.一种主观题评分模型的训练方法,其特征在于,所述主观题评分模型包括要点匹配模型,所述训练方法包括:获取标准答案中的若干要点文本;获...
【专利技术属性】
技术研发人员:汪意发,巩捷甫,盛志超,王士进,胡国平,秦兵,刘挺,
申请(专利权)人:河北省讯飞人工智能研究院中科讯飞互联北京信息科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。