[发明专利]一种文本信息提取方法、装置及设备在审
申请号: | 202110707811.5 | 申请日: | 2021-06-24 |
公开(公告)号: | CN113408296A | 公开(公告)日: | 2021-09-17 |
发明(设计)人: | 刘禄;廖锐;刘志伟;王海永;杨雪;张春龙 | 申请(专利权)人: | 东软集团股份有限公司 |
主分类号: | G06F40/30 | 分类号: | G06F40/30;G06F40/253;G06K9/62 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 储倩 |
地址: | 110179 辽*** | 国省代码: | 辽宁;21 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文本 信息 提取 方法 装置 设备 | ||
1.一种文本信息提取方法,其特征在于,所述方法包括:
提取预设长度的待处理文本的文本特征以及词性特征;
将所述待处理文本的文本特征以及词性特征进行融合,得到所述待处理文本的文本融合特征;
将第一层次的序列标注模型确定为当前层次的序列标注模型;
将所述待处理文本的文本融合特征输入所述当前层次的序列标注模型,对所述当前层次的序列标注模型对应的待抽取信息项进行标注,得到所述当前层次的序列标注模型输出的所述待处理文本的标注结果;
判断是否存在下一层次的序列标注模型;
如果存在下一层次的序列标注模型,将所述当前层次的序列标注模型输出的所述待处理文本的标注结果与所述待处理文本的文本融合特征进行融合,重新得到所述待处理文本的文本融合特征;
将所述下一层次的序列标注模型确定为当前层次的序列标注模型,重新执行所述将所述待处理文本的文本融合特征输入所述当前层次的序列标注模型以及后续步骤;
如果不存在下一层次的序列标注模型,获得各个层次的序列标注模型输出的所述待处理文本的标注结果;
对所述各个层次的序列标注模型输出的所述待处理文本的标注结果进行解析,获得所述待处理文本包括的不同层次的待抽取信息项的信息抽取内容。
2.根据权利要求1所述的方法,其特征在于,在提取预设长度的待处理文本的文本特征以及词性特征之前,所述方法还包括:
对原始文本进行冗余信息过滤以及敏感信息脱敏处理,得到第一目标文本;
如果所述第一目标文本的长度大于预设长度,将所述第一目标文本切分为多个小于或等于所述预设长度的第二目标文本,将所述第二目标文本的长度补齐到所述预设长度,生成待处理文本;
如果所述第一目标文本的长度小于预设长度,将所述第一目标文本的长度补齐到所述预设长度,生成待处理文本;
如果所述第一目标文本的长度等于预设长度,将所述第一目标文本确定为待处理文本。
3.根据权利要求1所述的方法,其特征在于,在获得所述待处理文本包括的不同层次的待抽取信息项的信息抽取内容之后,所述方法还包括:
获取目标信息抽取内容的文本特征以及目标术语文本的文本特征,所述目标信息抽取内容为所述信息抽取内容中的任一项,所述目标术语文本为预先确定的术语文本中的任一项;
将所述目标信息抽取内容的文本特征与所述目标术语文本的文本特征进行匹配;
如果所述目标信息抽取内容的文本特征与所述目标术语文本的文本特征匹配,将所述目标信息抽取内容替换为所述目标术语文本。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
初始化各个层次的序列标注模型;
将第一层次的序列标注模型确定为当前层次的序列标注模型;
将训练文本的文本融合特征输入所述当前层次的序列标注模型,对所述当前层次的序列标注模型对应的待抽取信息项进行标注,得到所述当前层次的序列标注模型输出的所述训练文本的标注结果;
根据所述训练文本中针对所述当前层次的序列标注模型对应的待抽取信息项的标准标注结果以及所述当前层次的序列标注模型输出的所述训练文本的标注结果,得到所述当前层次的序列标注模型的损失值;
判断是否存在下一层次的序列标注模型;
如果存在下一层次的序列标注模型,将所述当前层次的序列标注模型输出的所述训练文本的标注结果与所述训练文本的文本融合特征进行融合,重新得到所述训练文本的文本融合特征;
将所述下一层次的序列标注模型确定为当前层次的序列标注模型,重新执行所述将所述训练文本的文本融合特征输入所述当前层次的序列标注模型以及后续步骤;
如果不存在下一层次的序列标注模型,获得各个层次的序列标注模型的损失值;
将所述各个层次的序列标注模型的损失值加权相加得到综合损失值,根据所述综合损失值调整所述各个层次的序列标注模型;
重新执行所述将第一层次的序列标注模型确定为当前层次的序列标注模型以及后续步骤,直到达到预设停止条件,得到训练生成的各个层次的序列标注模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东软集团股份有限公司,未经东软集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110707811.5/1.html,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置