[发明专利]一种识别方法、装置和电子设备在审
申请号: | 201811615801.3 | 申请日: | 2018-12-27 |
公开(公告)号: | CN111382598A | 公开(公告)日: | 2020-07-07 |
发明(设计)人: | 辛晓哲;秦波;李瑞楠;孙博;王帅;黄海兵;李斌;陈伟 | 申请(专利权)人: | 北京搜狗科技发展有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 莎日娜 |
地址: | 100084 北京市海淀区中关*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 识别 方法 装置 电子设备 | ||
本发明实施例提供了一种识别方法、装置和电子设备,其中,所述方法包括:进入书写状态,从摄像头采集的视频图像中获取第一手部视频图像;对所述第一手部视频图像进行图像处理,获取书写手指的指尖位置信息并依据所述指尖位置信息在显示屏上显示书写轨迹;待书写状态结束后,依据所述指尖位置信息对书写轨迹进行识别,得到对应的候选信息并展示;进而通过图像处理确定的指尖位置信息实现书写轨迹的识别,而无需采用深度信息进行识别,能够提高识别效率。此外,由于本发明实施例无需采用深度信息进行识别,因此也无需采用深度摄像头采集视频图像,从而降低了隔空手写的识别成本。
技术领域
本发明涉及数据处理技术领域,特别是涉及一种识别方法、装置和电子设备。
背景技术
文字作为一种普遍使用的信息传播和交流工具,在人机交互系统中扮演着重要的角色,目前广泛使用的文字输入方式包括:键盘、触屏、手写板等,用户在使用这些手写设备进行手写的过程中,需要与手写设备进行接触实现书写;但是在某些场景下,例如驾驶过程中语音识别受噪声影响失效情况下,接触式手写显得尤其不简便,因此隔空手写应运而生。
目前,业内均是基于深度摄像头进行隔空手写识别,其弊端在于首先需要采用深度摄像头采集图像,成本高,其次,在实际识别过程中需要用到深度信息,因此识别效率低。
发明内容
本发明实施例提供一种识别方法,以降低隔空手写的识别成本和提高识别效率。
相应的,本发明实施例还提供了一种识别装置和一种电子设备,用以保证上述方法的实现及应用。
为了解决上述问题,本发明实施例公开了一种识别方法,具体包括:进入书写状态,从摄像头采集的视频图像中获取第一手部视频图像;对所述第一手部视频图像进行图像处理,获取书写手指的指尖位置信息并依据所述指尖位置信息在显示屏上显示书写轨迹;待书写状态结束后,依据所述指尖位置信息对书写轨迹进行识别,得到对应的候选信息并展示。
可选地,所述从摄像头采集的视频图像中获取第一手部视频图像,包括:获取摄像头采集的视频图像,提取所述视频图像中手写区域的图像作为第一手部视频图像。
可选地,对所述第一手部视频图像进行图像处理,包括:对第一手部视频图像进行预处理,得到第一预处理图像;依据所述第一预处理图像,判断所述第一手部视频图像中手部的手势是否为书写手势;若所述第一手部视频图像中手部的手势为书写手势,则执行获取书写手指的指尖位置信息的步骤。
可选地,所述对第一手部视频图像进行预处理,得到第一预处理图像,包括:采用高斯混合模型对所述第一手部视频图像进行背景减除,从所述第一手部视频图像中提取前景得到第一图像;采用所述肤色模型对所述第一图像进行过滤,得到第二图像;对所述第二图像进行形态学处理,得到第三图像;对所述第三图像进行二值化处理,得到第一预处理图像。
可选地,所述依据所述第一预处理图像,判断所述第一手部视频图像中手部的手势是否为书写手势,包括:对所述第一预处理图像进行轮廓检测,确定所述第一预处理图像中的手部轮廓;对所述手部轮廓进行凸包检测,确定凸出手指的个数和各凸出手指的指尖位置信息;若所述凸出手指的个数与书写手势对应凸出手指的设定个数匹配,则确定所述第一手部视频图像中手部的手势是书写手势。
可选地,所述依据所述第一预处理图像,判断所述第一手部视频图像中手部的手势是否为书写手势,包括:将所述第一预处理图像输入至静态手势识别模型中,得到各手势的概率分值,其中,所述手势至少包括:开始书写手势、书写手势、选取手势、删除手势和其他手势;若书写手势的概率分值最高,则确定所述第一手部视频图像中手部的手势是书写手势。
可选地,所述获取书写手指的指尖位置信息,包括:将凸出手指的指尖位置信息确定为书写手指的指尖位置信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京搜狗科技发展有限公司,未经北京搜狗科技发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811615801.3/2.html,转载请声明来源钻瓜专利网。