[发明专利]文本识别方法、装置、移动终端以及存储介质

权利要求书

1.一种文本识别方法，其特征在于，所述方法包括：

检测作用于用户界面的触控操作，当所述触控操作满足预设条件时，对与所述触控操作的位置对应的所述用户界面上的界面元素进行识别；

当未识别成功时，截取与所述触控操作的位置对应的控件图像并对所述控件图像进行识别；

在所述用户界面的部分区域上叠加显示至少一个卡片，所述至少一个卡片用于显示由所述控件图像识别出的信息。

2.根据权利要求1所述的方法，其特征在于，所述当未识别成功时，截取与所述触控操作的位置对应的控件图像并对所述控件图像进行识别，还包括：

当未识别成功时，获取所述用户界面对应的应用程序；

判断所述应用程序是否为重点应用程序；

当所述应用程序是所述重点应用程序时，截取与所述触控操作的位置对应的控件图像并对所述控件图像进行识别；

当所述应用程序不是所述重点应用程序时，在所述用户界面显示选择控件，其中，所述选择控件用于触发手动框选或取消识别。

3.根据权利要求2所述的方法，其特征在于，所述当所述应用程序是所述重点应用程序时，截取与所述触控操作的位置对应的控件图像并对所述控件图像进行识别，包括：

当所述应用程序是所述重点应用程序时，获取与所述触控操作的位置对应的控件类型；

判断所述控件类型是否满足预设类型；

当所述控件类型满足预设类型时，截取与所述触控操作的位置对应的控件图像并对所述控件图像进行识别。

4.根据权利要求3所述的方法，其特征在于，所述在所述用户界面的部分区域上叠加显示至少一个卡片，包括：

判断所述控件图像是否能够识别出有效信息，其中，所述有效信息的置信概率高于预设值；

当所述控件图像能够识别出所述有效信息时，在所述用户界面的部分区域上叠加显示至少一个卡片；

当所述控件图像不能识别出所述有效信息时，在所述用户界面显示所述选择控件。

5.根据权利要求4所述的方法，其特征在于，所述当所述控件图像不能识别出所述有效信息时，在所述用户界面显示所述选择控件，包括：

获取对所述控件图像进行识别的时长；

判断所述时长是否超过预设时长；

当所述时长超过所述预设时长时，在所述用户界面显示所述选择控件。

6.根据权利要求4所述的方法，其特征在于，所述当所述控件图像不能识别出所述有效信息时，在所述用户界面显示所述选择控件，还包括：

当所述控件图像不能识别出所述有效信息时，在所述用户界面显示所述选择控件和识别不成功的提示信息。

7.根据权利要求1-6任一项所述的方法，其特征在于，所述当未识别成功时，截取与所述触控操作位置对应的控件图像并对所述控件图像进行识别，还包括：

当未识别成功时，获取所述触控操作对应的触控中心位置；

判断所述触控中心位置是否在所述用户界面的有效控件上，其中，所述有效控件至少包括一个界面元素；

当所述触控中心位置在所述有效控件上时，截取有效控件图像并对所述有效控件图像进行识别；

当所述触控中心位置不在所述有效控件上时，截取用户界面图像并对所述用户界面图像进行识别。

8.一种文本识别装置，其特征在于，所述装置包括：

界面元素识别模块，用于检测作用于用户界面的触控操作，当所述触控操作满足预设条件时，对所述触控操作的位置对应的所述用户界面上的界面元素进行识别；

图像截取模块，用于当未识别成功时，截取与所述触控操作的位置对应的控件图像并对所述控件图像进行识别；

卡片显示模块，用于在所述用户界面的部分区域上叠加显示至少一个卡片，所述至少一个卡片用于显示由所述控件图像识别出的信息。