[发明专利]知识点提取方法和装置在审
申请号: | 202110336756.3 | 申请日: | 2021-03-29 |
公开(公告)号: | CN115129857A | 公开(公告)日: | 2022-09-30 |
发明(设计)人: | 吴智东 | 申请(专利权)人: | 广州视源电子科技股份有限公司;广州视源人工智能创新研究院有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F40/194;G06F40/279;G06F40/30;G06K9/62 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 张娜;臧建明 |
地址: | 510530 广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 知识点 提取 方法 装置 | ||
1.一种知识点提取方法,其特征在于,包括:
将待处理文本输入知识点分类模型,得到概率向量,所述概率向量包括所述待处理文本属于各个知识点的概率;
根据所述待处理文本和各个知识点的知识点向量,获取相关度向量,所述相关度向量包括所述待处理文本和各个知识点的相关度;
根据所述概率向量和所述相关度向量,获取各个知识点的相关性评分;
根据各个知识点的相关性评分,确定所述待处理文本所属的知识点。
2.根据权利要求1所述的方法,其特征在于,所述将待处理文本输入知识点分类模型之前,所述方法还包括:
构建训练集数据,所述训练集数据包括多个训练样本,每个训练样本包括:题目、所述题目的特征词表以及所述题目的知识点;
构建初始知识点分类模型;
使用所述训练集数据对所述初始知识点分类模型进行训练,得到所述知识点分类模型。
3.根据权利要求2所述的方法,其特征在于,所述构建训练集数据包括:
构建学科词表;
针对题库中每个题目,使用所述学科词表和所述题目进行匹配,得到所述题目的特征词表,所述题库中每个题目、所述题目的特征词表以及所述题目的知识点构成一个训练样本。
4.根据权利要求3所述的方法,其特征在于,所述构建学科词表,包括:
对题目文本进行分词处理,得到第一候选词表,所述题目文本由所述题库中的所有题目构成;
计算所述第一候选词表中每个词的词频-逆文本频率指数TF-IDF;
根据所述第一候选词表中每个词的TF-IDF,获取所述学科词表。
5.根据权利要求4所述的方法,其特征在于,所述根据所述待处理文本和各个知识点的知识点向量,获取相关度向量之前,还包括:
针对每个知识点,从所述题库获取和所述知识点相关的所有题目;
提取所有题目中每个题目的特征向量;
根据每个题目的特征向量,确定所述知识点的知识点向量。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述根据每个题目的特征向量,确定所述知识点的知识点向量,包括:
采用如下公式确定所述知识点的知识点向量:
其中,Vci为所述知识点的知识点向量,VQij表示所述知识点第j个题目的特征向量,nci表示所述知识点相关的所有题目的数量。
7.根据权利要求6所述的方法,其特征在于,所述根据所述待处理文本和各个知识点的知识点向量,获取相关度向量,包括:
提取所述待处理文本的特征向量;
针对每个知识点,根据所述待处理文本的特征向量和所述知识点的知识点向量,确定所述待处理文本和所述知识点的相关度,所述待处理文本和各个知识点的相关度构成所述相关度向量。
8.根据权利要求7所述的方法,其特征在于,所述根据所述待处理文本的特征向量和所述知识点的知识点向量,确定所述待处理文本和所述知识点的相关度,包括:
采用如下公式获取确定所述待处理文本和所述知识点的相关度:
Score=Cosine(Bert(xq),Vci)
其中,Score为所述待处理文本和所述知识点的相关度,Bert(xq)为待处理文本的特征向量,Vci为所述知识点的知识点向量。
9.根据权利要求6所述的方法,其特征在于,所述根据所述概率向量和所述相关度向量,获取各个知识点的相关性评分,包括:
采用如下公式获取各个知识点的相关性评分:
其中,VMxq为概率向量,VSxq为相关度向量,Vscore包括各个知识点的相关性评分,为概率向量对应的权重。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州视源电子科技股份有限公司;广州视源人工智能创新研究院有限公司,未经广州视源电子科技股份有限公司;广州视源人工智能创新研究院有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110336756.3/1.html,转载请声明来源钻瓜专利网。