[发明专利]一种吃饭动作的识别方法和装置有效
申请号: | 201611187196.5 | 申请日: | 2016-12-20 |
公开(公告)号: | CN108205651B | 公开(公告)日: | 2021-04-06 |
发明(设计)人: | 彭巍;范晓晖;杨新苗 | 申请(专利权)人: | 中国移动通信有限公司研究院;中国移动通信集团公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00 |
代理公司: | 北京派特恩知识产权代理有限公司 11270 | 代理人: | 高洁;姚开丽 |
地址: | 100053 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 吃饭 动作 识别 方法 装置 | ||
1.一种吃饭动作的识别方法,其特征在于,该方法包括:
对获取的每帧视频图像进行检测,确定检测到人脸;
以所述检测到的人脸为参照选取每帧视频图像中的吃饭活动区域,并依据第一预设条件对所述吃饭活动区域进行区域划分,得到多个视频图像区域;
对划分得到的与手部对应的所述视频图像区域进行运动区域检测,得到所述视频图像区域中的运动区域;
对所述运动区域进行肤色检测,得到所述运动区域中的肤色区域;
获取所述人脸底部位置的纵坐标y1和所述肤色区域顶部的纵坐标y2,并计算两者的差值△y=y1-y2;如果在T时间内,所述△y满足第二预设条件的次数大于第一阈值m,则确定检测到吃饭动作;
其中,所述第二预设条件为:在t时间内,所述△y满足条件-H/4<△y<H的概率超过第二阈值p;所述t<T;所述H为所述视频图像中人脸的高度。
2.根据权利要求1所述的方法,其特征在于,所述以所述检测到的人脸为参照选取每帧视频图像中的吃饭活动区域,包括:
以所述检测到的人脸为参照,在竖直方向上,所述吃饭活动区域的顶部位于所述人脸的顶部;在水平方向上,所述人脸位于所述吃饭活动区域的中间位置;所述吃饭活动区域为矩形,所述矩形的高为3H,宽为5W,所述H为所述视频图像中人脸的高度,所述W为所述视频图像中人脸的宽度。
3.根据权利要求2所述的方法,其特征在于,所述依据第一预设条件对所述吃饭活动区域进行区域划分,包括:
在水平方向上从左到右将所述吃饭活动区域划分成三个区域,中间的第二区域为所述人脸所在的区域,第二区域的左侧为第一区域,第二区域的右侧为第三区域;所述第一区域、第二区域和第三区域的高均为3H,所述第一区域、第二区域和第三区域的宽分别为2W、W和2W。
4.根据权利要求3所述的方法,其特征在于,所述对划分得到的与手部对应的所述视频图像区域进行运动区域检测,包括:
对所述第一区域和/或第三区域的视频图像进行运动区域检测。
5.一种吃饭动作的识别装置,其特征在于,该装置包括:
人脸检测模块,用于对获取的每帧视频图像进行检测,确定检测到人脸;
区域划分模块,用于以所述检测到的人脸为参照选取每帧视频图像中的吃饭活动区域,并依据第一预设条件对所述吃饭活动区域进行区域划分,得到多个视频图像区域;
运动检测模块,用于对划分得到的与手部对应的所述视频图像区域进行运动区域检测,得到所述视频图像区域中的运动区域;
肤色检测模块,用于对所述运动区域进行肤色检测,得到所述运动区域中的肤色区域;
动作检测模块,用于获取所述人脸底部位置的纵坐标y1和所述肤色区域顶部的纵坐标y2,并计算两者的差值△y=y1-y2;判断在T时间内,所述△y满足第二预设条件的次数大于第一阈值m,则确定检测到吃饭动作;
其中,所述第二预设条件为:在t时间内,所述△y满足条件-H/4<△y<H的概率超过第二阈值p;所述t<T;所述H为所述视频图像中人脸的高度。
6.根据权利要求5所述的装置,其特征在于,所述区域划分模块包括:
选取单元,用于以所述检测到的人脸为参照选取每帧视频图像中的吃饭活动区域;
划分单元,用于依据第一预设条件对所述吃饭活动区域进行区域划分,得到多个视频图像区域。
7.根据权利要求6所述的装置,其特征在于,
所述选取单元,用于以所述检测到的人脸为参照,在竖直方向上,所述吃饭活动区域的顶部位于所述人脸的顶部;在水平方向上,所述人脸位于所述吃饭活动区域的中间位置;所述吃饭活动区域为矩形,所述矩形的高为3H,宽为5W,所述H为所述视频图像中人脸的高度,所述W为所述视频图像中人脸的宽度。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国移动通信有限公司研究院;中国移动通信集团公司,未经中国移动通信有限公司研究院;中国移动通信集团公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611187196.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:指纹辨识模块
- 下一篇:一种吃饭动作的识别方法和装置