[发明专利]无接触式操作触发的方法、装置、设备及存储介质在审
申请号: | 202010886923.7 | 申请日: | 2020-08-28 |
公开(公告)号: | CN111986700A | 公开(公告)日: | 2020-11-24 |
发明(设计)人: | 陈文琼 | 申请(专利权)人: | 广州繁星互娱信息科技有限公司 |
主分类号: | G10L25/51 | 分类号: | G10L25/51;G06K9/00;H04L29/06 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 郭翱杰 |
地址: | 510032 广东省广州市黄埔区广新*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 接触 操作 触发 方法 装置 设备 存储 介质 | ||
1.一种无接触式操作触发的方法,其特征在于,所述方法包括:
获取音频采集设备采集的声音数据,在存储的基准声音数据中确定与所述声音数据相匹配的目标基准声音数据;
响应于确定出与所述声音数据相匹配的目标基准声音数据,基于基准声音数据、动作和操作的对应关系,确定所述目标基准声音数据对应的目标动作和目标操作;
当基于动作检测模型检测到采集的图像数据存在所述目标动作时,执行所述目标操作。
2.根据权利要求1所述的方法,其特征在于,所述当基于动作检测模型检测到采集的图像数据存在所述目标动作时,执行所述目标操作,包括:
获取在预设时间段内采集的图像数据,基于关键点提取模型,确定所述图像数据中的人体关键点位置信息;
基于动作检测模型和所述图像数据中的人体关键点位置信息,确定所述图像数据对应的第一动作;
当所述第一动作与所述目标动作相同时,则执行所述目标操作。
3.根据权利要求2所述的方法,其特征在于,所述人体关键点位置信息包括头部关键点位置信息,所述动作检测模型包括头部动作检测模型,所述第一动作包括第一头部动作,所述目标动作包括目标头部动作;
或者,
所述人体关键点位置信息包括手部关键点位置信息,所述动作检测模型包括手部动作检测模型,所述第一动作包括第一手部动作,所述目标动作包括目标手部动作。
4.根据权利要求2所述的方法,其特征在于,所述人体关键点位置信息包括手部关键点位置信息和头部关键点位置信息,所述动作检测模型包括手部动作检测模型和头部动作检测模型,所述第一动作包括第一手部动作和第一头部动作,所述目标动作包括目标手部动作和目标头部动作;
所述基于动作检测模型和所述图像数据中的人体关键点位置信息,确定所述图像数据对应的第一动作,包括:
基于手部动作检测模型和所述手部关键点位置信息,确定所述图像数据对应的第一手部动作,基于头部动作检测模型和所述头部关键点位置信息,确定所述图像数据对应的第一头部动作。
5.根据权利要求1所述的方法,其特征在于,所述基于基准声音数据、动作和操作的对应关系,确定所述目标基准声音数据对应的目标动作和目标操作之前,所述方法还包括:
对采集的图像数据进行面部检测,得到所述图像数据中的面部图像数据;
向服务器发送携带有当前登录账户的账户标识的面部图像数据请求;
接收所述服务器发送的所述账户标识对应的基准面部图像数据;
确定所述面部图像数据与所述基准面部图像数据相匹配。
6.根据权利要求1所述的方法,其特征在于,所述目标操作为启动目标功能或关闭目标功能。
7.一种无接触式操作触发的装置,其特征在于,所述装置包括:
获取模块,用于获取音频采集设备采集的声音数据,在存储的基准声音数据中确定与所述声音数据相匹配的目标基准声音数据;
确定模块,用于响应于确定出与所述声音数据相匹配的目标基准声音数据,基于基准声音数据、动作和操作的对应关系,确定所述目标基准声音数据对应的目标动作和目标操作;
执行模块,用于当基于动作检测模型检测到采集的图像数据存在所述目标动作时,执行所述目标操作。
8.根据权利要求7所述的装置,其特征在于,所述执行模块,用于:
获取在预设时间段内采集的图像数据,基于关键点提取模型,确定所述图像数据中的人体关键点位置信息;
基于动作检测模型和所述图像数据中的人体关键点位置信息,确定所述图像数据对应的第一动作;
如果所述第一动作与所述目标动作相同,则确定所述图像数据中存在所述目标动作,如果所述第一动作与所述目标动作不同,则确定所述图像数据中不存在所述目标动作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州繁星互娱信息科技有限公司,未经广州繁星互娱信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010886923.7/1.html,转载请声明来源钻瓜专利网。