[发明专利]一种人机交互方法、装置、电子设备和存储介质

权利要求书

1.一种人机交互方法，应用在终端中，所述终端设置有显示屏幕，其特征在于，所述方法包括：

控制所述显示屏幕进行显示；

获取用户眼睛的第一眼部参数和第一光影，其中，所述第一眼部参数用于表征用户眼睛虹膜的位置，所述第一光影为所述显示屏幕在用户眼睛上的光影；

获取用户眼睛到所述显示屏幕的第一观看距离；

根据所述第一观看距离、所述第一眼部参数和所述第一光影得到用户眼睛注视在所述显示屏幕上的注视坐标；

根据所述注视坐标得到用户在所述显示屏幕上的输入信息。

2.根据权利要求1所述的人机交互方法，其特征在于，所述终端设置有前置摄像头；所述获取用户眼睛的第一眼部参数和第一光影，包括：

获取用户的脸部图像，所述脸部图像是由所述前置摄像头拍摄得到的；

根据所述脸部图像解析得到第一眼眶位置信息、第一虹膜位置信息和第一光影，其中，所述第一眼眶位置信息用于表征用户眼眶的位置，所述第一虹膜位置信息用于表征用户眼睛虹膜的位置；

根据所述第一眼眶位置信息和所述第一虹膜位置信息得到第一眼部参数。

3.根据权利要求2所述的人机交互方法，其特征在于，所述根据所述脸部图像解析得到第一眼眶位置信息、第一虹膜位置信息和第一光影，包括：

基于预设的检测器对所述脸部图像进行人脸眼睛区域检测，得到第一眼眶位置信息；

将所述脸部图像转换为灰度图像，并对所述灰度图像进行二值化处理，得到第一预处理图像，根据所述第一预处理图像中矩形或圆形的噪声图像得到第一光影；

对所述第一预处理图像进行腐蚀和膨胀处理，并剔除图像中的噪声，得到第二预处理图像，并利用圆形的结构元素提取所述第二预处理图像中表征用户眼睛虹膜的圆形区域的位置，得到用户眼睛的第一虹膜位置信息。

4.根据权利要求1所述的人机交互方法，其特征在于，所述根据所述第一观看距离、所述第一眼部参数和所述第一光影得到用户眼睛注视在所述显示屏幕上的注视坐标，包括：

根据所述第一观看距离匹配对应距离下的坐标映射关系表；

计算所述第一光影的光影坐标；

根据所述第一眼部参数和所述光影坐标，在所述坐标映射关系表中查表得到用户眼睛注视在所述显示屏幕上的注视坐标。

5.根据权利要求4所述的人机交互方法，其特征在于，所述第一光影的形状为矩形或圆形，所述光影坐标是所述第一光影的几何中心点或平均点。

6.根据权利要求4所述的人机交互方法，其特征在于，所述方法还包括：

在所述显示屏幕上显示样本光标；

获取用户眼睛注视所述样本光标时的第二眼部参数和第二光影，其中，所述第二眼部参数用于表征用户眼睛虹膜的位置，所述第二光影为所述显示屏幕或所述样本光标在用户眼睛上的光影；

获取用户眼睛注视所述样本光标时到所述显示屏幕的第二观看距离；

在所述第二观看距离下，记录所述第二眼部参数和所述第二光影的对应关系，以建立所述样本光标的坐标映射关系表。

7.根据权利要求6所述的人机交互方法，其特征在于，所述在所述显示屏幕上显示样本光标，包括：

将所述显示屏幕均匀划分成多个显示区域；

分别在各个所述显示区域上显示样本光标。

8.根据权利要求7所述的人机交互方法，其特征在于，所述在所述第二观看距离下，记录所述第二眼部参数和所述第二光影的对应关系，以建立所述样本光标的坐标映射关系表，包括：

依次在各个所述显示区域上显示所述样本光标；

当用户所处的观看位置不变时，在所述第二观看距离下，分别记录用户依次观看各个所述样本光标对应的多个所述第二眼部参数和多个所述第二光影的对应关系，以建立所述样本光标的坐标映射关系表。