[发明专利]识别键盘字符的方法、装置、存储介质及电子设备

说明书

本公开涉及一种识别键盘字符的方法、装置，存储介质及电子设备，以提高获得的键盘的目标识别结果的准确性。该方法包括：获取键盘所在区域的图像对应的光学字符识别结果；根据所述光学字符识别结果，获取所述键盘对应的标准字符分布信息；根据所述标准字符分布信息对所述光学字符识别结果进行修正，得到所述键盘的目标识别结果。

技术领域

本公开涉及数据处理技术领域，具体地，涉及一种识别键盘字符的方法、装置、存储介质及电子设备。

背景技术

在移动设备中，在一些密码输入的场景下，软件开发商一般会使用专属的安全键盘，必须通过点击安全键盘上的字符才能输入。由于安全键盘做了安全限制，在软件的自动化测试过程中，无法通过抓取dom结构来获取各个字符的位置信息，从而便不能够通过虚拟点击的方式实现字符输入，而如果通过手工点击进行输入的话，将降低自动化测试的效率。因此，如何识别键盘中字符的位置成为一个需要解决的问题。

发明内容

本公开的目的是提供一种识别键盘字符的方法、装置、存储介质及电子设备，以提高键盘字符识别的准确性。

为了实现上述目的，第一方面，本公开提供一种识别键盘字符的方法，所述方法包括：

获取键盘所在区域的图像对应的光学字符识别结果；

根据所述光学字符识别结果，获取所述键盘对应的标准字符分布信息；

根据所述标准字符分布信息对所述光学字符识别结果进行修正，得到所述键盘的目标识别结果。

可选地，所述光学字符识别结果包括识别出的字符以及字符对应的坐标信息，所述根据所述光学字符识别结果，获取所述键盘对应的标准字符分布信息，包括：

根据所述坐标信息，对识别出的各个字符进行分行，得到位于不同行的字符集合；

基于各行字符集合的特征信息，确定所述键盘对应的键盘类型；

根据所述键盘类型，确定所述键盘对应的标准字符分布信息。

可选地，所述标准字符分布信息包括对应键盘的每一按键行分布的标准字符，所述光学字符识别结果包括识别出的字符以及字符对应的坐标信息，所述根据所述标准字符分布信息对所述光学字符识别结果进行修正，得到所述键盘的目标识别结果，包括：

从所述光学字符识别结果中确定与目标按键行中分布的标准字符对应的目标字符，所述目标按键行为键盘上的任一按键行；

基于所述目标字符的坐标信息，以及所述标准字符分布信息中所述目标按键行分布的标准字符，修正所述图像中与所述目标字符处于同一按键行的字符的光学字符识别结果。

可选地，所述标准字符分布信息还包括标准行间顺序，所述标准行间顺序用于表征所述键盘的各按键行的排列顺序，所述从所述光学字符识别结果中确定与目标按键行中分布的标准字符对应的目标字符，包括：

根据所述坐标信息，对识别出的各个字符进行分行，得到位于不同行的字符集合；

基于各行字符集合的排列顺序以及所述标准行间顺序，从各行字符集合中确定与所述目标按键行对应的目标行字符集合；

在所述目标行字符集合中不存在重复的字符时，从所述目标行字符集合包括的字符中，确定与所述目标按键行中分布的标准字符相同的字符为所述对应的目标字符。

可选地，所述标准字符分布信息还包括标准行内顺序，所述标准行内顺序表征每一按键行中分布的标准字符的排列顺序，所述方法还包括：

在所述目标行字符集合中存在重复的字符时，从所述目标行字符集合包括的字符中，确定与所述目标按键行中分布的标准字符相同的字符为候选字符；