[发明专利]表格信息抽取方法、装置、存储介质及电子设备有效
申请号: | 202111594001.X | 申请日: | 2021-12-24 |
公开(公告)号: | CN113987112B | 公开(公告)日: | 2022-04-08 |
发明(设计)人: | 孙勇;丁雪纯;于业达;顾文斌;罗丰 | 申请(专利权)人: | 杭州恒生聚源信息技术有限公司;上海恒生聚源数据服务有限公司 |
主分类号: | G06F16/31 | 分类号: | G06F16/31;G06F16/25 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 张丽娜 |
地址: | 310018 浙江省杭州市经济技术开*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 表格 信息 抽取 方法 装置 存储 介质 电子设备 | ||
1.一种表格信息抽取方法,其特征在于,包括:
对待抽取的目标表格中的合并数据进行预处理,得到与所述目标表格对应的二维矩阵;
将所述二维矩阵的行和/或列数据输入到表头检测模型,得到所述目标表格对应的行和/或列的表头检测结果;
基于所述表头检测结果,确定所述目标表格的表格样式;
根据与所述表格样式对应的处理模式,生成所述目标表格的单元格文本序列和表头文本矩阵;
对所述表头文本序列进行遍历,以获得目标字段文本与所述表头文本序列中每一文本的匹配结果;
根据所述匹配结果和所述单元格文本序列,获得目标字段文本对应的单元格对象;
基于每一目标字段文本对应的单元格对象的值序列,建立所述匹配结果对应的行或列的索引信息;
基于所述索引信息对所述目标表格进行信息抽取,得到抽取结果;
其中,所述根据与所述表格样式对应的处理模式,生成所述目标表格的单元格文本序列和表头文本矩阵,包括:
若所述表格样式为竖式,生成所述目标表格的单元格文本序列和表头文本矩阵;
若所述表格样式为横式,将所述目标表格的表头列转换为行,生成转换后的目标表格的单元格文本序列和表头文本矩阵;
若所述目标表格为目标样式,将所述目标表格的表头列转为表头行,并将两个表头列之间的列转换为表头行的内容行,生成转换后的目标表格对应的单元格文本序列和表头文本矩阵,其中,目标样式为间隔行为表头或间隔列为表头。
2.根据权利要求1所述的方法,其特征在于,所述待抽取的目标表格中的合并数据进行预处理,得到与所述目标表格对应的二维矩阵,包括:
获取待抽取的目标表格中的具有数据合并的行,对被合并的行进行数据补充;
获取待抽取的目标表格中的具有数据合并的列,对被合并的列进行数据补充;
生成行和/或列进行数据补充后的表格对应的二维矩阵。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取第一训练样本,所述第一训练样本是目标领域的表格数据,且每一表格标注有对应的表头行或列;
获取第二训练样本,并基于所述第二训练样本对初始神经网络模型进行训练,得到预训练模型,所述第二训练样本为目标领域对应的文本训练集;
基于所述第一训练样本对所述预训练模型进行调整训练,获得表头检测模型。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
确定第一文本,所述第一文本为满足目标文本条件的文本;
生成与所述第一文本满足相似条件的第二文本,以及与所述第一文本不满足所述相似条件的第三文本;
根据所述第一文本、所述第二文本和所述第三文本通过预训练模型,得到与所述第一文本对应的第一向量,所述第二文本对应的第二向量以及所述第三文本对于应的第三向量;
分别计算所述第一向量和所述第二向量之间的第一余弦值,以及所述第一向量与所述第三向量之间的第二余弦值,并基于所述第一余弦值和所述第二余弦值之间的差值调整所述预训练模型,得到语义匹配模型;
其中,所述对所述表头文本序列进行遍历,以获得目标字段文本与所述表头文本序列中每一文本的匹配结果,包括:
基于所述语义匹配模型对所述表头文本序列进行遍历,以获得目标字段文本与所述表头文本序列中每一文本的匹配结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州恒生聚源信息技术有限公司;上海恒生聚源数据服务有限公司,未经杭州恒生聚源信息技术有限公司;上海恒生聚源数据服务有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111594001.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:红外共焦镜头
- 下一篇:数据流处理方法、装置、服务器及存储介质
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置