[发明专利]VR眼镜的实景观测方法及VR眼镜

权利要求书

1.一种VR眼镜的实景观测方法，适用于包含广角摄像头的VR眼镜，其特征在于，包括：

响应于获取下一帧待显示图像的指令，确定当前时刻的用户头部位姿数据，所述当前时刻，是接收到获取下一帧待显示图像的指令的时刻；

根据所述当前时刻的用户头部位姿数据以及所述广角摄像头拍摄实景图像时刻的用户头部位姿数据，从所述广角摄像头拍摄到的保存至存储空间的所述实景图像中选取送屏图像，所述送屏图像是所述实景图像对应的部分图像；

将所述送屏图像作为所述下一帧待显示图像发送至显示屏进行显示，以供用户观测；

所述广角摄像头拍摄实景图像时刻，是接收到获取下一帧待显示图像的指令之前的时刻。

2.根据权利要求1所述的方法，其特征在于，根据所述当前时刻的用户头部位姿数据以及所述广角摄像头拍摄实景图像时刻的用户头部位姿数据，从所述广角摄像头拍摄到的所述实景图像中选取送屏图像，包括：

根据所述当前时刻的用户头部位姿数据，确定获取送屏图像时刻的用户头部位姿数据；

根据所述获取送屏图像时刻的用户头部位姿数据以及所述拍摄实景图像时刻的用户头部位姿数据，获取图像选取框的倾角以及所述图像选取框的中心点在所述实景图像中对应的位置；

根据所述倾角，旋转所述图像选取框；

采用所述旋转后的图像选取框，以所述图像选取框的中心点在所述实景图像中对应的位置为取景中心，从所述实景图像中选取送屏图像。

3.根据权利要求2所述的方法，其特征在于，根据所述当前时刻的用户头部位姿数据，确定获取送屏图像时刻的用户头部位姿数据，包括：

以所述当前时刻的用户头部位姿数据作为获取送屏图像时刻的用户头部位姿数据。

4.根据权利要求2所述的方法，其特征在于，根据所述当前时刻的用户头部位姿数据，确定获取送屏图像时刻的用户头部位姿数据，包括：

根据所述当前时刻的用户头部位姿数据，预测显示送屏图像时刻的用户头部位姿数据；

以显示送屏图像时刻的用户头部位姿数据作为获取送屏图像时刻的用户头部位姿数据。

5.根据权利要求3或4所述的方法，其特征在于，获取图像选取框的倾角，包括：

获取用户头部从所述拍摄实景图像时刻至所述获取送屏图像时刻的转动数据；

根据所述转动数据所指示的用户头部的转动角以及转动方向，确定所述图像选取框的倾角；

获取所述图像选取框的中心点在所述实景图像中对应的位置，包括：

从所述头部转动数据中，确定所述VR眼镜的透镜的视场中心从所述拍摄实景图像时刻到所述获取送屏图像时刻在与所述VR眼镜平行的方向上的位移；

在所述实景图像中，基于所述位移，确定与所述实景图像的中心点存在相应偏移量的一点，作为所述图像选取框的中心点在所述实景图像中对应的位置。

6.根据权利要求2-4中任一项所述的方法，其特征在于，采用旋转后的图像选取框，以所述图像选取框的中心点在所述实景图像中对应的位置为取景中心，从所述实景图像中选取送屏图像之前，还包括：

根据透镜的视场角以及所述透镜和所述显示屏之间的距离，确定图像选取框的尺寸。

7.根据权利要求6所述的方法，其特征在于，采用旋转后的图像选取框，以所述图像选取框的中心点在所述实景图像中对应的位置为取景中心，从所述实景图像中选取送屏图像，包括：

若采用所述旋转后的图像选取框，以所述图像选取框的中心点在所述实景图像中对应的位置为取景中心所获取的图像包含所述实景图像的边界以外的区域，则对边界以外的区域进行像素填充以得到送屏图像。

8.根据权利要求7所述的方法，其特征在于，对边界以外的区域进行像素填充以得到送屏图像，包括：

以所述实景图像的边界处的像素填充所述边界以外的区域以得到送屏图像。