[发明专利]简答题的机器智能评阅方法及系统

说明书

本申请涉及试卷评阅，公开了一种简答题的机器智能评阅方法及系统，避免对于通过堆砌词语来获得高分的行为的误判，评分结果更加客观、准确。该方法包括：预先基于学科语料获取该学科的学科关键词和普通关键词，并获取各学科关键词的关联词集合，构建该学科的关键词库；获取目标试题的作答信息和标准答案；基于关键词库，提取该标准答案中的学科关键词集合和普通关键词集合，并确定各学科关键词的关联词集合以拓展学科关键词集合；基于拓展后的学科关键词集合识别作答信息中的学科关键词、关联词，基于普通关键词集合识别作答信息中的普通关键词；计算作答信息的句子合理度；根据评分公式计算该作答信息的评分。

技术领域

本申请涉及试卷评阅，特别涉及简答题的机器智能评阅技术。

背景技术

考试是教学活动中不可或缺的重要部分，其是对学生平时学习情况的检查，也是对教师教学水平的检验。

随着计算机技术的发展，目前普遍采用计算机辅助的方式进行试卷评阅，目前客观题的自动评阅技术相对成熟，而主观题(例如，简答题)的自动评阅仍然是计算机自动评阅技术中的难点。虽然目前已经提出了一些主观题的自动评阅方法，但是这些方法中仍存在很多问题。例如，公开号为CN108959261A的中国申请公开了一种基于自然语言的试卷主观题判题装置及方法，该装置首先提取考生答案中的关键词，然后计算所提取关键词与得分点关键词的词语相似度，计算考生答案的文本句子与参考答案提供句子的句子相似度，最后根据词语相似度和句子相似度获取考生答案的判定成绩。该装置存在的问题在于：仅通过词义相似度来计算关键词的词语相似度，以及采用两个句子中所包含词语的词语相似度计算两个句子的语义相似度，仅是对句子的表象信息的评判，缺乏对句子本身的逻辑性的评判，容易造成例如通过堆砌词语来获得高分的误判。

发明内容

本申请的目的在于提供一种简答题的机器智能评阅方法及系统，避免对于通过堆砌词语来获得高分的行为的误判，评分结果更加客观、准确。

本申请公开了一种简答题的机器智能评阅方法，包括：

预先基于学科语料获取该学科的学科关键词和普通关键词，并生成各关键词的词向量表，基于所述词向量表对各关键词进行聚类，获取各学科关键词的关联词集合，构建该学科的关键词库；

获取目标试题的作答信息和标准答案；

基于所述关键词库，提取所述标准答案中的学科关键词集合和普通关键词集合，并确定各学科关键词的关联词集合以拓展所述学科关键词集合；

基于拓展后的学科关键词集合识别所述作答信息中的学科关键词、关联词，基于所述普通关键词集合识别所述作答信息中的普通关键词；

计算所述作答信息的句子合理度，该句子合理度是指句子中词与词之间的逻辑顺序和关系的合理程度；

根据公式计算所述作答信息的评分F，其中，s₁、s₂、s₃、s₄分别表示所述作答信息中的学科关键词信息、关联词信息、普通关键词信息、句子合理度的权重系数且s₁＞s₂＞s₃，F₀为所述目标试题总分。

在一个优选例中，所述计算所述作答信息的句子合理度，该句子合理度是指句子中词与词之间的逻辑顺序和关系的合理程度，进一步包括：

分别提取所述作答信息和所述标准答案中每个句子的词语序列；

根据马尔可夫假设采用N-gram语言模型计算各所述词语序列中每个词语在所在句子中出现位置的概率值；

基于贝叶斯条件概率模型根据所述每个词语在所在句子中出现位置的概率值计算所述每个句子的词语合理概率值；

根据所述作答信息和所述标准答案中每个句子的词语合理概率值计算所述作答信息的句子合理度。