[发明专利]基于多层模型的实体识别方法、装置、设备及存储介质有效
申请号: | 202010696698.0 | 申请日: | 2020-07-20 |
公开(公告)号: | CN111738008B | 公开(公告)日: | 2021-04-27 |
发明(设计)人: | 杨志专 | 申请(专利权)人: | 深圳赛安特技术服务有限公司 |
主分类号: | G06F40/295 | 分类号: | G06F40/295 |
代理公司: | 深圳市力道知识产权代理事务所(普通合伙) 44507 | 代理人: | 何姣 |
地址: | 518000 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 多层 模型 实体 识别 方法 装置 设备 存储 介质 | ||
1.一种基于多层模型的实体识别方法,其特征在于,所述多层模型包括词语识别模型、句法分析模型和命名实体识别模型,所述方法包括:
获取包括至少一个复杂实体的语句信息,并基于所述词语识别模型对所述语句信息进行分词处理,得到多个分词信息;
通过所述句法分析模型,提取每个所述分词信息的句法关系,所述句法关系包括当前节点、父节点和节点间的距离;
确定每个所述分词信息的类型,并获取每个所述分词信息的类型各自对应的语料集合;
从每个所述语料集合中获取每个所述分词信息各自对应的标注信息集;
基于句法关系的表达式,对每个所述标注信息集中的标注信息进行筛选,得到多个筛选后的标注信息集,所述筛选后的标注信息集包括实体类型、当前节点词性、父节点词性和节点间的距离;
将每个所述语料集合各自对应的多个筛选后的标注信息集进行汇集,得到所述命名实体识别模型的训练语料,所述训练语料包括多个复杂实体的筛选后的标注信息集;
基于所述训练语料对所述命名实体识别模型进行迭代训练,直至所述命名实体识别模型收敛,得到更新的命名实体识别模型;
将每个所述分词信息以及每个所述分词信息的句法关系输入所述更新的命名实体识别模型,得到所述语句信息中的至少一个复杂实体。
2.如权利要求1所述的基于多层模型的实体识别方法,其特征在于,所述将每个所述分词信息以及每个所述分词信息的句法关系输入所述更新的命名实体识别模型,得到所述语句信息中的至少一个复杂实体,包括:
将每个所述分词信息和每个所述分词信息的句法关系输入更新的命名实体识别模型,得到多个实体信息和每个所述实体信息的概率;
根据所述多个实体信息和每个所述实体信息的概率,确定所述语句信息中的至少一个复杂实体。
3.如权利要求1所述的基于多层模型的实体识别方法,其特征在于,所述语句信息为问题语句信息;所述得到所述语句信息中的至少一个复杂实体之后,还包括:
将所述问题语句信息中的实体信息输入预先设置好的问答响应模型,以获取所述问题语句信息的答案信息。
4.如权利要求3所述的基于多层模型的实体识别方法,其特征在于,所述问答响应模型包括实体编码层、句法分析层、实体解码层、意图理解层和答案生成层;所述将所述问题语句信息中的实体信息输入预先设置好的问答响应模型,以获取所述问题语句信息的答案信息,包括:
通过所述实体编码层,对所述问题语句信息中的目标实体信息进行编码映射,得到目标问题语句信息;
基于所述句法分析层,对目标问题语句信息进行句法分析,得到句法分析树;
通过所述实体解码层,对所述句法分析树中的目标问题语句信息进行解码,得到目标句法分析树;
通过所述意图理解层确定目标句法分析树的意图,得到语义查询图;
基于所述答案生成层,根据所述语义查询图确定所述问题语句信息的答案信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳赛安特技术服务有限公司,未经深圳赛安特技术服务有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010696698.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种纸箱生产用自动糊盒机
- 下一篇:一种棒管料传送装置