[发明专利]一种基于手指颜色贴片的手势轨迹识别方法在审
申请号: | 201910851460.8 | 申请日: | 2019-09-10 |
公开(公告)号: | CN110633666A | 公开(公告)日: | 2019-12-31 |
发明(设计)人: | 高美凤;付天豪;于力革 | 申请(专利权)人: | 江南大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/32;G06K9/46;G06N3/04;G06N3/08 |
代理公司: | 23211 哈尔滨市阳光惠远知识产权代理有限公司 | 代理人: | 彭素琴 |
地址: | 214000 江苏*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 手势识别 贴片 轨迹点 手势轨迹 质心坐标 卷积神经网络 人机交互技术 单目摄像头 复杂背景 轨迹识别 人体脸部 实时获取 手指颜色 射线法 申请 手势 肤色 采集 图像 应用 | ||
1.一种轨迹识别方法,其特征在于,所述方法包括:
S1在待识别部位进行颜色贴片,并采集复杂背景下待识别部位的视频轨迹图像,其中颜色贴片被待识别部位完全包围;
S2获取视频轨迹图像中每帧图片中颜色贴片的质心坐标,得到颜色贴片的质心坐标序列,并对质心坐标序列进行预处理,进而得到视频轨迹图像中颜色贴片的质心轨迹图;
S3采用训练好的卷积神经网络模型检测得到的质心轨迹图,得出识别结果。
2.根据权利要求1所述的方法,其特征在于,所述S2中对质心坐标序列进行预处理的过程中,采用射线法排除伪质心坐标,所述伪质心坐标为类颜色贴片的颜色的背景图中的非颜色贴片的质心坐标。
3.根据权利要求2所述的方法,其特征在于,所述采用射线法排除伪质心坐标之前,还包括:
获取视频轨迹图像中待识别部位的轮廓坐标并确定采用射线法可能存在的多种非正常情况。
4.根据权利要求3所述的方法,其特征在于,所述采用射线法排除伪质心坐标,包括:以质心坐标点开始,向右或向左的水平方向作一条射线,计算该射线与待识别部位的轮廓的交点个数,若交点个数为偶数,则该质心坐标为伪质心坐标。
5.根据权利要求3所述的方法,其特征在于,所述多种非正常情况包括:
射线与待识别部位轮廓相邻两个轮廓坐标点之间的线段平行;
射线与待识别部位轮廓相邻两个轮廓坐标点之间的线段重叠;
射线在待识别部位轮廓相邻两个轮廓坐标点之间的线段下方;
射线在待识别部位轮廓相邻两个轮廓坐标点之间的线段上方;
待识别部位轮廓相邻两个轮廓坐标点之间的线段的其中一端正好经过射线。
6.根据权利要求1所述的方法,其特征在于,所述颜色贴片是区别于待识别部位颜色的颜色贴纸。
7.根据权利要求6所述的方法,其特征在于,所述待识别部位为人体某一部位。
8.根据权利要求7所述的方法,其特征在于,当所述待识别部位为人体手指部位时,所述获取视频轨迹图像中待识别部位的轮廓坐标,包括:
将视频轨迹图像中每帧图片颜色空间从RGB转换到YCbCr颜色空间提取手指部位的肤色区域,对提取后的肤色区域进行滤波,并对滤波后图像进行二值化处理,使用轮廓检测获得肤色轮廓坐标。
9.根据权利要求8所述的方法,其特征在于,所述获取视频轨迹图像中每帧图片中颜色贴片的质心坐标,包括:
对视频轨迹图像中每帧图片进行检测,将图片转换到HSV颜色空间,提取颜色贴片区域,对提取了颜色贴片后的照片进行腐蚀膨胀操作,使用轮廓检测获得颜色贴片坐标,并计算轮廓的矩,得到质心坐标。
10.根据权利要求9所述的方法,其特征在于,所述S3采用训练好的卷积神经网络模型检测得到的质心轨迹图之前,还包括:
训练卷积神经网络模型:收集手写字符样本图片,将收集好的手写字符图集预处理后进行卷积神经网络训练,得到训练好的卷积神经网络模型,卷积神经网络模型由两层卷积层、两层池化层、一层密集连接层和输出层组成;
所述将收集好的手写字符图集预处理指将收集好的手写字符图集中的图片转化成宽度和高度都一致的图片。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江南大学,未经江南大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910851460.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:识别方法、设备和存储介质
- 下一篇:一种基于多任务随机森林的动作预测方法