[发明专利]一种基于眼动交互技术的医护方法、系统和电子设备

说明书

本申请涉及一种基于眼动交互技术的医护方法和系统，该方法包括：眼动追踪装置中的红外光源发出红外光照射病人的眼眶；眼动追踪模块通过摄像头采集病人眼眶中的亮点信息和角膜反射信息，并发送至头戴式显示设备的控制器；控制器根据亮点信息和角膜反射信息生成眼动数据，确定眼动数据对应在头戴式显示设备显示界面中的位置坐标，根据位置坐标生成控制指令；控制器基于控制指令生成病人的需求信息并发送至医护终端。通过本申请，解决了相关技术中ICU病人与医护人员的沟通效果较差的问题，ICU病人通过眼动即可实现与医护人员的沟通，较大的提升了两者间的沟通便捷性；另外，病人还可以通过该头戴式显示设备进行娱乐活动，也提升了病人的生存质量。

技术领域

本申请涉及虚拟现实技术领域，特别是涉及一种基于眼动交互技术的医护方法、系统和电子设备。

背景技术

重症监护病房(Intensive Care Unit，简称为ICU)中的病人因为伤痛或其他特殊病因，往往无法行动和开口说话。导致无法向外界传达自身的需求，医护人员也无法获知病人的需求。

在相关技术中，由医护人员根据病人的潜在需求制作多个卡片，并将卡片一张一张的展示给病人，然后根据病人的反应来判断病人的需求。但是，如果卡片数量太多，对医护人员造成的负担较大，同时，这种方法沟通效率较为低下，通过医护人员一张一张的给病人查看并分析病人的反应，病人的不适和需求很难及时反馈。但是，如果卡片数量太少，很多病人的需求就没有办法准确表达出来。

目前针对相关技术中ICU病人与医护人员的沟通效果较差的问题，尚未提出有效的解决方案。

发明内容

本申请实施例提供了一种基于眼动交互技术的医护方法、头戴式显示设备和系统，以至少解决相关技术中ICU病人与医护人员的沟通效果较差的问题。

第一方面，本申请实施例提供了一种基于眼动交互技术的医护方法，应用在头戴式显示设备上，该头戴式显示设备包括眼动追踪装置，所述方法包括：

所述眼动追踪装置中的红外光源发出红外光照射病人的眼眶；

所述眼动追踪模块通过摄像头采集所述病人眼眶中的亮点信息和角膜反射信息，并发送至所述头戴式显示设备的控制器，其中，所述亮点信息是所述病人的瞳孔在所述红外光源照射下相对于眼角膜形成的亮点，所述角膜反射信息是所述眼角膜在所述红外光照射下的反射信息；

所述控制器根据所述亮点信息和所述角膜反射信息生成眼动数据，确定所述眼动数据对应在所述头戴式显示设备显示界面中的位置坐标，根据所述位置坐标生成控制指令；

所述控制器基于所述控制指令生成所述病人的需求信息并发送至医护终端，所述医护终端以图像或者音效的形式呈现所述需求信息。

在其中一些实施例中，所述控制器根据所述亮点信息和所述角膜反射信息生成所述病人的眼动数据包括：

所述眼动追踪模块通过所述摄像头采集所述病人的眼眶图像，并对所述眼眶图像中的所述亮点信息和所述角膜反射信息进行标记；

基于标记之后的所述眼眶图像，获取其中所述瞳孔与所述角膜之间的角度并基于所述角度生成所述病人的视线向量；

所述控制器将所述视线向量映射至所述显示界面上生成所述眼动数据。

在其中一些实施例中，所述控制器根据所述位置坐标生成控制指令，基于所述控制指令生成所述病人的需求信息包括：

所述控制器指示所述显示界面显示卡片选择界面，其中，所述卡片选择界面包括多个卡片区域；

在所述卡片选择界面下获取所述眼动数据，并将所述眼动数据转换为所述位置坐标；

所述位置坐标位于所述卡片区域且连续存在第一预设时间段之后，所述控制器生成与所述卡片区域对应的控制指令，并输出所述控制指令对应的所述需求信息。