[发明专利]基于面部取向检测的图像取向

说明书

呈现用于图像处理和利用的方法、系统、计算机可读媒体和设备。在一些实施例中，可以使用移动装置获得含在用户的面部处的图像。可以使用所述移动装置确定所述用户的所述面部在所述图像内的取向。所述用户的所述面部的所述取向可以使用多个阶段确定：(a)旋转阶段，用于控制应用于所述图像的一部分的旋转，以产生经旋转图像部分，以及(b)取向阶段，用于控制应用于对所述经旋转图像部分执行的取向特定特征检测的取向。可以利用所述用户的所述面部的所述所确定的取向作为控制输入，来修改所述移动装置的显示画面旋转。

本申请是申请日为2017年7月12日、申请号为：201780036542.6、发明名称为“基于面部取向检测的图像取向”的发明专利申请的分案申请。

背景技术

本公开的方面涉及检测和利用与由移动装置所捕获的图像相关联的对象取向。根据本公开的实施例，可以不同方式利用所检测到的取向。一个实例是由移动装置自动控制呈现给用户的显示画面的旋转。评定合适显示画面旋转可以是具有挑战性的任务。就精度和计算效率来说，目前的技术在许多方面都缺乏。举例来说，实施在移动装置中的简单自动显示画面旋转特征通常利用如使用加速度计所测量的重力方向来控制呈现给用户的显示画面的旋转(例如，“纵向”对“横向”旋转)。然而，有时无法通过简单地使用重力方向来准确地确定适当显示画面旋转。举例来说，如果移动装置在桌子上平坦放置，显示器向上朝向天空，那么重力向量朝着与显示器平面垂直的方向指向，并且因此不能提供用于呈现给用户的显示画面适当旋转的有用指示。通常，使用装置平放之前显示器的上一个取向，其可能不是可用于用户适当查看的合适旋转。作为另一实例，如果用户在侧躺(例如，在床上)时将移动装置握持在他的面前，那么重力向量控制的自动显示画面旋转技术将通常导致从用户视角来看的不正确显示画面旋转。此处，显示画面可能在甚至较小移动下不当地自动旋转。这是因为仅使用重力向量的系统将仅感测到移动装置已从直立位置移动到俯卧位置，且得出作为响应必须旋转显示画面(例如，从“纵向”到“横向”旋转)的结论。然而，系统将不能感测到用户也从直立移动到俯卧位置，并且因此事实上应不需要对显示画面的旋转。现存系统的这些和其它缺点突出了对于用于图像相关的取向检测和利用的改进技术的需要。

发明内容

描述某些实施例以用于改进基于图像处理的显示画面旋转。方法可包括使用移动装置，获得包含所述移动装置的使用者的面部的图像。方法可以进一步包括使用移动装置确定所述用户的所述面部在所述图像内取向。可以使用多个阶段确定所述用户的所述面部在所述图像内的所述取向，其可包括：(a)旋转阶段，用于控制应用于所述图像的一部分的旋转，以产生经旋转图像部分；以及(b)取向阶段，用于控制应用于对所述经旋转图像部分执行的取向特定特征检测的取向。方法可以进一步包括作为控制输入，利用所述用户的所述面部的所述所确定的取向，以修改所述移动装置的显示画面旋转。

在一个实施例中，所述经旋转图像部分存储在旋转缓冲器中。在一个实施例中，所述取向特定特征检测是使用计算机视觉(computer vision；CV)计算单元执行。在一个实施例中，所述用户的所述面部在所述图像内的所述取向是基于多种模式确定。所述多个模式可包括：(a)检测模式，其用于检测所述用户的所述面部在初始图像内的初始取向；以及(b)跟踪模式，其用于使用所述所检测的初始取向，跟踪所述用户的所述面部在后续图像内的所述取向。

根据一个实施例，在所述检测模式中，通过在第一多个假设角度执行特征检测，检测所述使用者的所述面部在所述图像内的所述初始取向。在同一实施例中，在跟踪模式中，通过在第二多个假设角度处执行特征检测，跟踪所述用户的所述面部在所述后续图像内的所述取向，所述第二多个少于所述第一多个。

根据另一实施例，在跟踪模式中，在检测到与非图像传感器相关联的触发条件时，跟踪所述用户的所述面部在所述后续图像内的所述取向。举例来说，非图像传感器可包括加速度计。

附图说明

本公开的方面是作为实例而说明。在图示中，相似附图标记指示类似元件。在下文简要地描述图示：

图1A描绘移动装置平坦放置在桌子上且被用户查看的情形；