[发明专利]一种手动取词的方法及装置

权利要求书

1.一种手动取词的方法，其特征在于，用于取词模型，所述方法包括：

获取目标图像，并对所述目标图像进行手部图像检测；

在检测到所述目标图像包含手部图像的情况下，对所述手部图像进行指尖识别，确定指尖位置；

在目标图像中确定所述指尖位置对应的候选区域，对所述指尖位置对应的候选区域进行处理，以生成目标词单元；

其中，确定所述指尖位置对应的候选区域，对所述指尖位置对应的候选区域进行处理，以生成目标词单元，包括：确定所述指尖位置对应的候选区域，对所述指尖位置对应的候选区域进行文本检测，生成文本序列，将所述文本序列进行词单元识别，并基于识别的词单元确定目标词单元；

确定所述指尖位置对应的候选区域，包括：

在所述指尖位置包括多个的情况下，将与每个所述指尖位置的距离位于第一阈值范围内的图像区域确定为该指尖位置对应的候选区域；

基于识别的词单元确定目标词单元，包括：

确定每个词单元在所述候选区域中的位置；

基于每个词单元在所述候选区域中的位置，分别确定每个所述词单元与指尖位置的距离，并将与所述指尖位置距离最近的所述词单元作为所述目标词单元，在与指尖位置距离最近的所述词单元为至少两个的情况下，统计与指尖位置距离最近的至少两个所述词单元在所述候选区域中的出现频率，将出现频率最低的词单元作为目标词单元。

2.如权利要求1所述的方法，其特征在于，所述取词模型包括：图像识别模型和指尖识别模型；

对所述目标图像进行手部图像检测，包括：

将所述目标图像输入至所述图像识别模型进行手部图像检测；

在检测到所述目标图像包含手部图像的情况下，对所述手部图像进行指尖识别，确定指尖位置，包括：

在所述图像识别模型检测到所述目标图像包含手部图像的情况下，通过所述指尖识别模型对所述手部图像进行指尖识别，确定指尖位置。

3.如权利要求2所述的方法，其特征在于，在所述图像识别模型检测到所述目标图像包含手部图像的情况下，通过所述指尖识别模型对所述手部图像进行指尖识别，确定指尖位置，包括：

在所述图像识别模型检测到所述目标图像包含手部图像的情况下，确定所述手部图像对应的区域边框，其中，所述区域边框包围的区域图像包含所述手部图像；

通过所述指尖识别模型对所述区域边框包围的区域图像进行指尖识别，确定至少一个指尖位置。

4.如权利要求1所述的方法，其特征在于，所述取词模型还包括：文本检测模型；

对所述指尖位置对应的候选区域进行文本检测，生成文本序列，包括：

将所述候选区域输入至所述文本检测模型，对所述候选区域进行文本提取，得到对应的文本序列。

5.如权利要求1所述的方法，其特征在于，所述取词模型还包括：词单元识别模型；

将所述文本序列进行词单元识别，包括：将所述文本序列输入至所述词单元识别模型，生成所述文本序列对应的至少一个词单元。

6.如权利要求1所述的方法，其特征在于，还包括：将所述目标词单元进行查词翻译，并返回得到的翻译结果。