[发明专利]一种图片中表格的识别方法及装置

权利要求书

1.一种图片中表格的识别方法，其特征在于，所述方法包括：

获取待识别的图片；

采用预先训练的表格区域识别模型，识别出所述图片中的表格区域；

采用预先训练的表格单元格识别模型，识别出所述表格区域中单元格的线条；

采用预先训练的表格文字区域识别模型，识别出所述表格区域中的文字区域；

将识别出的表格单元格的线条和识别出的全部文字区域相结合，确定所述表格区域的单元格，并对所述表格区域的单元格进行重制；

将所述表格区域中每个单元格区域进行切分，采用预先训练的字符识别模型，识别出每个单元格区域中的字符内容；

将识别出的字符内容填入到重制后的单元格中，形成识别后的表格；

其中，所述将识别出的表格单元格的线条和识别出的全部文字区域相结合，确定所述表格区域的单元格，包括：

根据识别出的文字区域的行高、行距以及字距，调整错误识别的文字区域；

根据调整后的文字区域，补全所述表格区域模型未识别出的单元格的线条；

根据单元格的线条，调整所述表格区域中行和列对应的单元格。

2.如权利要求1所述的图片中表格的识别方法，其特征在于，在将所述表格区域中每个单元格区域进行切分之后，还包括：记录每个单元格区域的位置信息；

所述将识别出的字符内容填入到重制后的单元格中，包括：

将识别出的字符内容根据对应的单元格区域的位置信息填入到重制后的单元格中。

3.如权利要求1所述的图片中表格的识别方法，其特征在于，所述方法还包括：

对识别出的字符内容中的文字、数字、字母和符号进行分类，根据分类结果对识别出的字符内容进行修正处理。

4.如权利要求1所述的图片中表格的识别方法，其特征在于，所述方法还包括：

根据识别出来的字符内容在标准数据库中进行检索，判断检索结果与识别出的字符内容是否一致，如果不一致，则根据检索结果对识别出的字符内容进行修正处理。

5.如权利要求1所述的图片中表格的识别方法，其特征在于，所述图片中包括：表格名称；

所述方法还包括：

采用所述表格区域识别模型，识别出所述图片中的表格名称区域，并采用所述字符识别模型进行字符识别，将识别出的表格名称与识别后的表格结合得到完整的表格信息。

6.如权利要求1所述的图片中表格的识别方法，其特征在于，所述表格区域识别模型、所述表格单元格识别模型、所述表格文字区域识别模型是基于深度卷积神经网络或深度残差网络建立的模型。

7.如权利要求1所述的图片中表格的识别方法，其特征在于，所述字符识别模型是基于空洞卷积和注意力模型建立的模型。

8.如权利要求7所述的图片中表格的识别方法，其特征在于，所述字符识别模型包括：针对打印字体的识别模型和针对手写字体的识别模型，所述针对打印字体的识别模型和所述针对手写字体的识别模型分别经过各自独立的训练而成。