[发明专利]控制无人机拍摄的方法及装置、虚拟现实设备及系统

说明书

本发明公开了一种控制无人机拍摄的方法及装置、虚拟现实设备及系统，该方法包括：获取虚拟现实设备的内置摄像头拍摄得到的用户眼睛图像；根据预先训练得到的用户眼睛状态识别模型，确定用户眼睛图像对应的眼睛状态，其中，所述眼睛状态包括睁眼状态、闭眼状态和眯眼状态；从连续帧用户眼睛图像中，确定位于相邻两次睁眼状态之间的、闭眼状态和眯眼状态对应的用户眼睛图像的第一帧数；判断所述第一帧数是否超过预设的第一帧数阈值，得到第一判断结果；在所述第一判断结果为是的情况下，向无人机发送拍摄指令。根据本发明的一个实施例，解放了用户的双手，提高了人机交互体验。

技术领域

本发明涉及无人机技术领域，更具体地，涉及一种控制无人机拍摄的方法、一种控制无人机拍摄的装置、一种虚拟现实设备和一种虚拟现实系统。

背景技术

目前，用户FPV(First Person View，第一人称视角)飞行眼镜通常用于配合无人机使用。无人机装有摄像头，可将摄像头实时采集的图像传递至飞行眼镜。当用户佩戴飞行眼镜时，可通过飞行眼镜的显示屏幕观看无人机实时传递的图像。当用户观看到的图像满足其需求时，通过操控遥控器的拍摄按键，向无人机发送拍摄指令。无人机在接收到来自遥控器的拍摄指令后，对当前对准的画面进行拍摄。

上述飞行眼镜仅用于观看无人机实时回传的图像，并且用户需要通过操作遥控器向无人机发送拍摄指令，不能使用户的双手得到解放。

因此，需要提供一种新的技术方案，针对上述现有技术中的技术问题进行改进。

发明内容

本发明的一个目的是提供一种控制无人机拍摄的新技术方案。

根据本发明的第一方面，提供了一种控制无人机拍摄的方法，包括：

获取虚拟现实设备的内置摄像头拍摄得到的用户眼睛图像；

根据预先训练得到的用户眼睛状态识别模型，确定用户眼睛图像对应的眼睛状态，其中，所述眼睛状态包括睁眼状态、闭眼状态和眯眼状态；

从连续帧用户眼睛图像中，确定位于相邻两次睁眼状态之间的、闭眼状态和眯眼状态对应的用户眼睛图像的第一帧数；

判断所述第一帧数是否超过预设的第一帧数阈值，得到第一判断结果；

在所述第一判断结果为是的情况下，向无人机发送拍摄指令。

可选地，在所述第一判断结果为是的情况下，所述方法还包括：

确定位于相邻两次睁眼状态之间的、闭眼状态对应的用户眼睛图像的第二帧数；

判断所述第二帧数是否超过预设的第二帧数阈值，得到第二判断结果；

在所述第二判断结果为是的情况下，向所述无人机发送拍摄指令。

可选地，在获取摄像头拍摄得到的用户眼睛图像之前，所述方法还包括：

将不同眼睛状态的图像输入至深度学习神经网络中，训练得到用户眼睛状态识别模型，其中，所述用户眼睛状态识别模型包括睁眼状态识别模型、闭眼状态识别模型和眯眼状态识别模型。

可选地，在获取摄像头拍摄得到的用户眼睛图像之前，所述方法还包括：

获取虚拟现实设备的内置压力传感器测量得到的压力值；

在所述压力值超过预设压力阈值的情况下，开启所述摄像头，以对用户眼睛进行拍摄。

可选地，从连续帧用户眼睛图像中，确定位于相邻两次睁眼状态之间的、闭眼状态和眯眼状态对应的用户眼睛图像的第一帧数，包括：