[发明专利]控制无人机拍摄的方法及装置、虚拟现实设备及系统有效
申请号: | 201810079478.6 | 申请日: | 2018-01-26 |
公开(公告)号: | CN108345844B | 公开(公告)日: | 2020-11-20 |
发明(设计)人: | 袁杭良 | 申请(专利权)人: | 上海歌尔泰克机器人有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00 |
代理公司: | 北京博雅睿泉专利代理事务所(特殊普通合伙) 11442 | 代理人: | 郭少晶;马佑平 |
地址: | 201708 上海市*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 控制 无人机 拍摄 方法 装置 虚拟现实 设备 系统 | ||
1.一种控制无人机拍摄的方法,其特征在于,包括:
获取虚拟现实设备的内置摄像头拍摄得到的用户眼睛图像;
根据预先训练得到的用户眼睛状态识别模型,确定用户眼睛图像对应的眼睛状态,其中,所述眼睛状态包括睁眼状态、闭眼状态和眯眼状态;
从连续帧用户眼睛图像中,确定位于相邻两次睁眼状态之间的闭眼状态和眯眼状态对应的用户眼睛图像的第一帧数;
判断所述第一帧数是否超过预设的第一帧数阈值,得到第一判断结果;
在所述第一判断结果为是的情况下,确定位于相邻两次睁眼状态之间的闭眼状态对应的用户眼睛图像的第二帧数;
判断所述第二帧数是否超过预设的第二帧数阈值,得到第二判断结果;
在所述第二判断结果为是的情况下,向无人机发送拍摄指令。
2.根据权利要求1所述的方法,其特征在于,在获取摄像头拍摄得到的用户眼睛图像之前,所述方法还包括:
将不同眼睛状态的图像输入至深度学习神经网络中,训练得到用户眼睛状态识别模型,其中,所述用户眼睛状态识别模型包括睁眼状态识别模型、闭眼状态识别模型和眯眼状态识别模型。
3.根据权利要求1所述的方法,其特征在于,在获取摄像头拍摄得到的用户眼睛图像之前,所述方法还包括:
获取虚拟现实设备的内置压力传感器测量得到的压力值;
在所述压力值超过预设压力阈值的情况下,开启所述摄像头,以对用户眼睛进行拍摄。
4.根据权利要求1所述的方法,其特征在于,从连续帧用户眼睛图像中,确定位于相邻两次睁眼状态之间的闭眼状态和眯眼状态对应的用户眼睛图像的第一帧数,包括:
从连续帧用户眼睛图像中,选取出相邻两次睁眼状态分别对应的第一用户眼睛图像和第二用户眼睛图像,其中,所述第一用户眼睛图像的下一帧用户眼睛图像的眼睛状态为眯眼状态或闭眼状态,所述第二用户眼睛图像的上一帧用户眼睛图像的眼睛状态为眯眼状态或闭眼状态;
确定位于所述第一用户眼睛图像和所述第二用户眼睛图像之间的用户眼睛图像的第一帧数。
5.根据权利要求1-4中任一所述的方法,其特征在于,所述用户眼睛图像为包括有用户左眼和/或用户右眼的图像。
6.一种控制无人机拍摄的装置,其特征在于,包括:
获取模块,用于获取虚拟现实设备的内置摄像头拍摄得到的用户眼睛图像;
眼睛状态确定模块,用于根据预先训练得到的用户眼睛状态识别模型,确定用户眼睛图像对应的眼睛状态,其中,所述眼睛状态包括睁眼状态、闭眼状态和眯眼状态;
第一帧数确定模块,用于从连续帧用户眼睛图像中,确定位于相邻两次睁眼状态之间的闭眼状态和眯眼状态对应的用户眼睛图像的第一帧数;
第一判断模块,用于判断所述第一帧数是否超过预设的第一帧数阈值,得到第一判断结果;
第二帧数确定模块,用于在所述第一判断结果为是的情况下,确定位于相邻两次睁眼状态之间的闭眼状态对应的用户眼睛图像的第二帧数;
第二判断模块,用于判断所述第二帧数是否超过预设的第二帧数阈值,得到第二判断结果;
发送指令模块,用于在所述第二判断结果为是的情况下,向无人机发送拍摄指令。
7.一种控制无人机拍摄的装置,其特征在于,包括:存储器和处理器,其中,所述存储器存储可执行指令,所述可执行指令控制所述处理器进行操作以执行根据权利要求1-5中的任何一项所述的控制无人机拍摄的方法。
8.一种虚拟现实设备,其特征在于,包括如权利要求6或7所述的控制无人机拍摄的装置。
9.一种虚拟现实系统,其特征在于,包括:无人机和如权利要求8所述的虚拟现实设备,其中,所述无人机和所述虚拟现实设备建立通信连接,所述无人机用于将无人机拍摄的图像发送至所述虚拟现实设备,所述无人机还用于执行所述虚拟现实设备发送的拍摄指令。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海歌尔泰克机器人有限公司,未经上海歌尔泰克机器人有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810079478.6/1.html,转载请声明来源钻瓜专利网。