[发明专利]视线估计方法、装置、电子设备及存储介质

权利要求书

1.一种视线估计方法，其特征在于，所述方法包括：

获取目标对象的视频，并从所述视频中提取多个视频帧；

对每个所述视频帧进行三维视线估计，得到视线方向；

根据所述视线方向计算视线角度；

根据多个所述视线角度得到视线角度序列，并过滤所述视线角度序列中的异常值，得到目标视线角度序列；

根据所述目标视线角度序列计算得到所述目标对象当前的目标视线角度。

2.如权利要求1所述的视线估计方法，其特征在于，所述根据所述视线方向计算视线角度包括：

基于图像坐标系和三维坐标系之间的转换关系，根据所述视线方向计算所述视线在图像坐标系中的视线坐标点；

根据所述视线坐标点计算视线单位向量；

根据所述视线单位向量计算所述视线在图像坐标系中的视线角度。

3.如权利要求2所述的视线估计方法，其特征在于，所述视线单位向量包第一值和第二值，所述根据所述视线单位向量计算所述视线在图像坐标系中的视线角度包括：

判断所述第二值是否小于0；

当所述第二值小于0时，根据所述第一值及预设第一计算模型计算所述视线角度；

当所述第二值大于0时，根据所述第一值及预设第二计算模型计算所述视线角度。

4.如权利要求1至3中任意一项所述的视线估计方法，其特征在于，在所述根据所述视线方向计算视线角度之后，所述方法还包括：

显示每个所述视频帧对应的视线角度；

其中，所述显示每个所述视频帧对应的视线角度包括：

对每个所述视频帧对应的视线角度与预设角度区间进行比较；

将在所述预设角度区间的视线角度确定为需进行角度转换的视线角度；

对所述需进行角度转换的视线角度进行角度转换；

显示转换后的视线角度。

5.如权利要求1所述的视线估计方法，其特征在于，所述从所述视频中提取多个视频帧包括：

根据视频采集设备的采集帧率对所述视频进行采样，得到所述视频在不同时间段的视频帧；

计算每两个相邻时间段的视频帧之间的差分绝对值；

获取所述差分绝对值大于预设阈值的目标相邻时间段；

将所述目标相邻时间段的后一时间段对应的视频帧进行存储；

将存储的视频帧作为提取的视频帧。

6.如权利要求5所述的视线估计方法，其特征在于，在从所述视频中提取多个视频帧之后，在对每个所述视频帧进行三维视线估计之前，所述方法还包括：

获取所述多个视频帧中的无人帧；

计算所述无人帧在所述多个视频帧中所占的第一比例；

判断所述第一比例是否大于预设第一比例阈值；

当所述第一比例大于所述预设第一比例阈值时，不对每个所述视频帧进行三维视线估计。

7.如权利要求6所述的视线估计方法，其特征在于，在所述对每个所述视频帧进行三维视线估计，得到视线方向之后，所述方法还包括：

根据所述视线方向计算得到视线在图像坐标系中的视线坐标点；

根据所述视线坐标点计算视线幅值；

获取多个所述视线幅值中小于预设幅值阈值的目标视线幅值；

计算所述目标视线幅值在多个所述视线幅值中的第二比例；

当所述第二比例大于所述预设第二比例阈值时，确定所述目标对象直视屏幕；

当所述第二比例不大于所述预设第二比例阈值时，确定所述目标对象没有直视屏幕。

8.一种视线估计装置，其特征在于，所述装置包括：

提取模块，用于获取目标对象的视频，并从所述视频中提取多个视频帧；

估计模块，用于对每个所述视频帧进行三维视线估计，得到视线方向；

计算模块，用于根据所述视线方向计算视线角度；

过滤模块，用于根据多个所述视线角度得到视线角度序列，并过滤所述视线角度序列中的异常值，得到目标视线角度序列；

所述计算模块，还用于根据所述目标视线角度序列计算得到所述目标对象当前的目标视线角度。