[发明专利]一种通过面部要素触发情景控制的方法与系统在审
申请号: | 202110398268.5 | 申请日: | 2021-04-14 |
公开(公告)号: | CN113283293A | 公开(公告)日: | 2021-08-20 |
发明(设计)人: | 江小青 | 申请(专利权)人: | 杭州鸿雁电器有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G10L25/03;G10L25/57 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 310058 浙江省杭*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 通过 面部 要素 触发 情景 控制 方法 系统 | ||
在一种通过面部要素触发情景控制的方法及其系统中,方法包括在智能家居设施处生成对应进场人员的虚拟身份,在虚拟身份中生成对该人员的第一要素处理内容,在读取该第一要素处理内容时检测虚拟子身份的输入,响应虚拟子身份输入在拍摄期间经摄像头感测与人员面部要素关联的视频信息,并经语音设备获取该人员音频信号以从所获音频信号中提取音频特性信息,从同步视频信号中提取与面部要素特征关联的面部要素特性信息,基于面部要素特性信息和音频特性信息生成音频特征信号,生成第二要素处理内容以检测与确定对情景模式的触发,本发明系统用于实现上述方法。
技术领域
本发明主要是关于使用用户面部要素触发家居情景控制的方法及其实现系统。
背景技术
目前家居、社区环境的智能化应用已经越来越普遍,而伴随着智能化应用的深入,家居设备开始具有图像识别功能,例如可以对注册用户的面部要素进行图形拍摄、录像以进行图形分析确定当前用户身份,或者是可以识别视野内人体或动物的移动等等。然而,目前在家居设备安防领域,期望于更便利地利用用户的面部要素来识别和触发对联网的家居设备的控制,以增强用户交互使用体验。
发明内容
本发明旨在解决目前这种功能需求,设计一种通过面部要素触发情景控制的方法,主要包括:在至少具有摄像头和/或语音设备的智能家居设施处,生成对应于每一进场人员的虚拟身份,在所述虚拟身份中生成对该人员的第一要素处理内容;在读取对应于所述虚拟身份的第一要素处理内容时,检测在所述虚拟身份中的虚拟子身份的输入;响应所检测到虚拟身份中的所述虚拟子身份输入,在拍摄期间经所述摄像头感测获取与所述人员的面部要素关联的视频信息,并经所述语音设备获取该人员音频信号以从所获音频信号中提取音频特性信息;以及从所获的同步视频信号中提取与面部要素特征关联的面部要素特性信息,并响应检测到所述拍摄操作结束后,至少部分地基于所述面部要素特性信息和音频特性信息,生成音频特征信号,根据该面部要素特性信息在所述虚拟身份中生成第二要素处理内容以检测与确定对情景模式的触发。
具体来说,如果在同一场景中的一个摄像头已拍摄了未经滤噪处理的进场人员的面部图像,而另一个摄像头也同样地拍摄到了该人员的头像,则该人员的面部要素被选择更新为具有更佳效果的拍摄图像,或者这两个摄像头各自拍摄到的视频被剪辑成判断为连续的图像,而采用新选择的头像照片作为虚拟身份的处理源。
作为一种变型,所述的方法还包括存储与从所述视频信号中提取的所述面部要素特性信息相关联的面部要素特征的元数据和与从所述音频信号中提取的所述音频特性信息相关联的音频元数据。
作为另一种变型,所述的方法还包括根据确定所述音频信号的所述特性提取部分对应于所述面部要素,存储所述音频信号的所述部分以用于生成所述经调整的音频信号。
在此基础上,所述的方法还包括根据确定所述音频信号的所述部分不对应于所述面部要素,至少移除所述音频信号的所述部分,其中所述音频特性信息包括与所述感测视场中的所述面部要素相关联的语音的特征。
进一步地,所述的方法还可包括至少部分地基于所述面部要素特性信息和所述音频特性信息来生成经调整的面部要素元数据。
作为又一种变型吗,所述的方法还包括根据所述经调整的面部要素元数据和所述经调整的音频信号来生成所述虚拟头像的所述第二要素处理内容。
在以上各个变型中,在对上述面部要素的处理进程中,通过所述摄像头检测该人员是否在移动,从而预触发邻近可用的门锁执行其机械和/或电子动作,或者同步录制和解析当前人员说出的语言内容来确定其接下来期望的行走动作。
本发明在以上基础上还设计一种通过面部要素触发情景控制的系统,包括用于实现上述方法的图形处理器。
附图说明
图1是实现本发明方法的逻辑原理框图;
图2是本发明实现方法的应用情景示意图。
具体实施方式
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州鸿雁电器有限公司,未经杭州鸿雁电器有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110398268.5/2.html,转载请声明来源钻瓜专利网。