[发明专利]基于瞳孔追踪技术的人像识别眼镜、识别方法及可读存储介质

说明书

一种基于瞳孔追踪技术的人像识别眼镜、识别方法及可读存储介质，方法包括：获取摄像模组所拍摄的包括若干对象的图像，将该图像在显示模组中显示；获取瞳孔的注视位置，根据所述注视位置，在显示模组中匹配该位置所对应的对象，并显示该对象的信息。本发明通过将摄像模组所拍摄的包括若干对象的图像、眼镜佩戴者瞳孔所注视的位置和显示模组的显示画面进行归一化，避免了现有技术中交叠、显示混乱等问题，提高了显示效果。

技术领域

本发明涉及一种智能眼镜技术领域，特别是指一种基于瞳孔追踪技术的人像识别眼镜、识别方法及可读存储介质。

背景技术

人像识别技术越来越普及，所需要的结构、电子及光学部件等组成部分已经可以集成到智能眼镜中，通过摄像头对人像进行实时识别，可声音提示，并将人像信息实时显示在近眼显示器中，给佩戴者进行实时的视觉体验。现有技术的增强现实(AR，AugmentedReality)设备，在其产品设备上设置有摄像头，用于采集现实场景，经过处理后将通过显示模组将增强现实的内容投射到人眼中，以实现增强现实的效果。增强现实技术包含了多媒体、三维建模、实时视频显示及控制、多传感器融合、实时跟踪及注册、场景融合等技术与手段，增强现实技术具有三个突出的特点：①真实世界和虚拟的信息集成；②具有实时交互性；③是在三维尺度空间中增添定位虚拟物体。显示技术多种多样，效果较好的是平面光波导镜片，可穿透观看现实中的人像，并可在光波导镜片中显示叠加的文字、图片等彩色信息。

使用智能眼镜对多人进行识别时，每个人的多个信息类别(如姓名、年龄、性别、爱好、有无犯罪记录等)都显示在视野中，与透过透视显示镜片看到的现实人物可能发生交叠、显示混乱等问题，影响观看体验。

发明内容

有鉴于此，本发明的主要目的在于提供一种基于瞳孔追踪技术的人像识别眼镜、识别方法及可读存储介质，通过将摄像模组所拍摄的包括若干对象的图像、眼镜佩戴者瞳孔所注视的位置和显示模组的显示画面进行归一化，避免了现有技术中交叠、显示混乱等问题，提高了显示效果。

所述的基于瞳孔追踪技术的智能眼镜的识别方法包括步骤：

获取摄像模组所拍摄的包括若干对象的图像，将该图像在显示模组中显示；

获取瞳孔的注视位置，根据所述注视位置，在显示模组中匹配该位置所对应的对象，并显示该对象的信息。

其中，所述获取摄像模组所拍摄的包括若干对象的图像，将该图像在显示模组中显示包括：构建摄像模组所拍摄的空间坐标系、显示模组所显示的显示坐标系、人眼看到的原始坐标系三者之间的坐标映射关系，基于所述映射关系将该图像映射在显示坐标系下以显示。

其中，所述获取瞳孔的注视位置包括：识别眼镜佩戴者瞳孔在原始坐标系所注视的位置，基于所述映射关系将瞳孔所注视的位置映射在所述显示坐标系下。

其中，所述基于所述映射关系将瞳孔所注视的位置映射在所述显示坐标系下包括：

分别获取瞳孔转动的坐标、瞳孔转动的坐标映射在空间坐标系上的位置，以及瞳孔转动的坐标映射在显示坐标系上的位置；

基于所述瞳孔转动的坐标，建立其所映射在空间坐标系上的位置对应在显示坐标系上的位置。

由上，以瞳孔转动为纽带，建立空间坐标系和显示坐标系之间的对应关系，从而使三重坐标系归一。

其中，瞳孔转动的坐标以角坐标形式表示为(α1,β1)；

瞳孔转动的坐标映射在空间坐标系上位置的坐标表示为(x1,y1)，

瞳孔转动的坐标映射在显示坐标系上位置的坐标表示为(a1,b1)，