[发明专利]一种数据提取方法、装置、终端设备及存储介质有效
| 申请号: | 201911012412.6 | 申请日: | 2019-10-23 |
| 公开(公告)号: | CN110909123B | 公开(公告)日: | 2023-08-25 |
| 发明(设计)人: | 夏政委;曹晓粲;赵洋;邹晓乐 | 申请(专利权)人: | 深圳价值在线信息科技股份有限公司 |
| 主分类号: | G06F16/33 | 分类号: | G06F16/33 |
| 代理公司: | 深圳中一联合知识产权代理有限公司 44414 | 代理人: | 李娟 |
| 地址: | 518000 广东省深圳市福田区沙头街道*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 数据 提取 方法 装置 终端设备 存储 介质 | ||
本申请实施例适用于数据处理技术领域,提供了一种数据提取方法、装置、终端设备及存储介质,所述方法包括:获取待处理文档,对所述待处理文档进行预处理,生成目标数据集;采用预先生成的文档匹配信息对所述目标数据集进行正则匹配,提取所述目标数据集中的文本数据;截取所述待处理文档中的表格;采用所述文档匹配信息对所述表格中的文本内容进行正则匹配,提取所述待处理文档中的表格数据;存储所述文本数据和所述表格数据。本实施例针对文本数据和表格数据分别进行处理,解决了按照相同方式对文本数据和表格数据进行提取时容易出现提取错误的问题,提高了数据提取的准确率。
技术领域
本申请属于数据处理技术领域,特别是涉及一种数据提取方法、装置、终端设备及存储介质。
背景技术
目前,投资者获取上市公司的相关信息主要来源于该公司发布的三会公告,即董事会公告、监事会公告和股东大会公告。如果想要使用公告中的详细数据,只能通过人工的方式实现,由工作人员逐份阅读公告文本,然后提取出有用的数据来支持相应的研究。
当涉及到大量的公告需要处理时,通过人工的方式提取公告中的数据效率极其低下。如果提取的数据是表格中的数据,在由工作人员录入这些表格数据时,也十分容易出现录入错误,降低数据提取的准确率。
发明内容
有鉴于此,本申请实施例提供了一种数据提取方法、装置、终端设备及存储介质,以解决现有技术中只能通过人工的方式提取公告中的数据,提取效率及准确率都较低的问题。
本申请实施例的第一方面提供了一种数据提取方法,包括:
获取待处理文档,对所述待处理文档进行预处理,生成目标数据集;
采用预先生成的文档匹配信息对所述目标数据集进行正则匹配,提取所述目标数据集中的文本数据;
截取所述待处理文档中的表格;
采用所述文档匹配信息对所述表格中的文本内容进行正则匹配,提取所述待处理文档中的表格数据;
存储所述文本数据和所述表格数据。
本申请实施例的第二方面提供了一种数据提取装置,包括:
目标数据集生成模块,用于获取待处理文档,对所述待处理文档进行预处理,生成目标数据集;
文本数据提取模块,用于采用预先生成的文档匹配信息对所述目标数据集进行正则匹配,提取所述目标数据集中的文本数据;
表格截取模块,用于截取所述待处理文档中的表格;
表格数据提取模块,用于采用所述文档匹配信息对所述表格中的文本内容进行正则匹配,提取所述待处理文档中的表格数据;
数据存储模块,用于存储所述文本数据和所述表格数据。
本申请实施例的第三方面提供了一种终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一方面所述数据提取方法的步骤。
本申请实施例的第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述第一方面所述数据提取方法的步骤。
与现有技术相比,本申请实施例包括以下优点:
本申请实施例,在获取到待处理文档后,通过对待处理文档进行预处理生成目标数据集,从而可以采用预先生成的文档匹配信息对目标数据集进行正则匹配,提取出相应的文本数据;而对于待处理文档中的表格,则可以预先从原文档中将各个表格截取出来,再采用文档匹配信息对表格中的文本内容进行正则匹配,提取出相应的表格数据。本实施例针对文本数据和表格数据分别进行处理,解决了按照相同方式对文本数据和表格数据进行提取时容易出现提取错误的问题,提高了数据提取的准确率。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳价值在线信息科技股份有限公司,未经深圳价值在线信息科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911012412.6/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





