[发明专利]一种处理表格图片中框选文字的方法及装置

权利要求书

1.一种处理表格图片中框选文字的方法，包括以下步骤：

步骤1、以去除表格图片中的干扰识别项；

步骤2、利用联合训练模型，在表格图片中圈选出字条，获取字条在表格图片中的字条位置坐标、并识别出与字条相对应的文字内容；

步骤3、利用表格特性对字条、字条位置坐标与文字内容进行表格还原。

2.根据权利要求1所述的一种处理表格图片中框选文字的方法，其特征在于，在步骤1中，对表格图片进行预处理，以去除表格图片中的干扰识别项，对表格图片进行的预处理包括图片角度纠偏操作、或水印印章去除操作。

3.根据权利要求1所述的一种处理表格图片中框选文字的方法，其特征在于，在步骤2中，包括以下子步骤：

步骤21、对去除干扰识别项的表格图片进行RGB三通道处理，以形成至少两个表格图片层；

步骤22、通过卷积变换对每个表格图片层进行特征提取；

步骤23、在第一表格图片层中，预测出字条在第一表格图片层中的字条位置坐标；

步骤24、在第二表格图片层中，通过图像信息和应用语言模型得到与字条相对应的文字内容。

4.根据权利要求3所述的一种处理表格图片中框选文字的方法，其特征在于，在步骤23中，字条位置坐标包括左上坐标(x0，y0)、右上坐标(x1，y1)、右下坐标(x2，y2)、左下坐标(x3，y3)。

5.根据权利要求1所述的一种处理表格图片中框选文字的方法，其特征在于，在步骤3中，根据字条位置坐标进行表格行与表格列的切分，将文字内容导入字条位置中，根据语义判断进行单元格的结合，以完成整体表格的还原。

6.根据权利要求1所述的一种处理表格图片中框选文字的方法，其特征在于，还包括步骤4、呈现还原后的表格。

7.一种实施权利要求1中所述的一种处理表格图片中框选文字的方法的装置，其特征在于，包括：预处理模块、识别模块与表格还原模块；

预处理模块，用于去除表格图片中的干扰识别项；

识别模块，利用联合训练模型，在表格图片中圈选出字条，获取字条在表格图片中的字条位置坐标、并识别出与字条相对应的文字内容；

表格还原模块，利用表格特性对字条、字条位置坐标与文字内容进行表格还原。

8.根据权利要求7所述的装置，其特征在于，所述预处理模块对表格图片进行的预处理包括图片角度纠偏操作、或水印印章去除操作。

9.根据权利要求7所述的装置，其特征在于，所述识别模块的实施步骤如下：

对表格图片进行RGB三通道处理，以形成至少两个表格图片层；

通过卷积变换对每个表格图片层进行特征提取；

在第一表格图片层中，预测出字条在第一表格图片层中的字条位置坐标；

在第二表格图片层中，通过图像信息和应用语言模型得到与字条相对应的文字内容。

10.根据权利要求7所述的装置，其特征在于，所述表格还原模块根据字条位置坐标进行表格行与表格列的切分，将文字内容导入字条位置中，根据语义判断进行单元格的结合，以完成整体表格的还原。