[发明专利]分析由头戴式设备的相机记录的图像中的对象的方法

权利要求书

1.一种分析由头戴式设备的相机记录的图像中的对象的方法，所述方法包括：

在记录所述图像时，执行眼动追踪；

基于所述眼动追踪，确定图像的感兴趣区域；

基于所述感兴趣区域，生成边界框；

基于所述边界框来裁剪图像以生成裁剪后的图像；

对所述裁剪后的图像执行精细裁剪；以及

检测所述裁剪后的图像中的对象。

2.根据权利要求1所述的方法，其中，检测所述裁剪后的图像中的对象包括执行深度学习。

3.根据权利要求2所述的方法，所述方法还包括：生成与所述图像中的对象相关联的对象检测置信度值；以及使用所述对象检测置信度值来确定以后图像的感兴趣区域。

4.根据权利要求1所述的方法，其中，对所述裁剪后的图像执行精细裁剪包括：使用显著性图来识别更新的感兴趣区域。

5.根据权利要求1所述的方法，其中，基于所述眼动追踪确定图像的感兴趣区域包括：利用与所述头戴式设备的视场相关联的预定角度来识别所述感兴趣区域。

6.根据权利要求1所述的方法，其中，生成边界框包括：使用在所述图像中检测到的对象的深度。

7.根据权利要求6所述的方法，其中，所述边界框的中心是基于所述感兴趣区域的中心确定的，并且所述边界框的大小是基于在所述图像中的检测到的对象的深度确定的。

8.一种分析由头戴式设备的相机记录的图像中的对象的方法，所述方法包括：

在记录所述图像时，执行眼动追踪；

基于所述眼动追踪，确定图像的感兴趣区域；

基于所述感兴趣区域的中心和与所述图像中的对象相关联的深度信息生成边界框；

基于所述边界框来裁剪图像以生成裁剪后的图像；以及

检测所述裁剪后的图像中的对象。

9.一种用于分析由头戴式设备的相机记录的图像中的对象的电子设备，所述电子设备包括：

处理器，所述处理器被耦接来接收由所述相机捕获的图像，其中，所述处理器：

在记录所述图像时，执行眼动追踪；

基于所述眼动追踪，确定图像的感兴趣区域；

基于所述感兴趣区域，生成边界框；

基于所述边界框来裁剪图像以生成裁剪后的图像；

对所述裁剪后的图像执行精细裁剪；以及

检测所述裁剪后的图像中的对象。

10.根据权利要求9所述的电子设备，其中，检测所述裁剪后的图像中的对象包括执行深度学习。

11.根据权利要求10所述的电子设备，其中，所述处理器进一步生成与所述图像中的对象相关联的对象检测置信度值，并且使用所述对象检测置信度值来确定以后图像的感兴趣区域。

12.根据权利要求9所述的电子设备，其中，对所述裁剪后的图像执行精细裁剪包括：使用显著性图来识别更新的感兴趣区域。

13.根据权利要求9所述的电子设备，其中，基于所述眼动追踪确定图像的感兴趣区域包括：利用与所述头戴式设备的视场相关联的预定角度来识别所述感兴趣区域。

14.根据权利要求9所述的电子设备，其中，生成边界框包括：使用在所述图像中检测到的对象的深度。

15.根据权利要求14所述的电子设备，其中，所述处理器进一步基于所述感兴趣区域的中心确定所述边界框的中心，并且基于在所述图像中的检测到的对象的深度确定所述边界框的大小。