[发明专利]注视度判断装置及方法

说明书

一种注视度判断装置及方法。该装置包含存储器，存储注视度判断模型；影像撷取器，用以撷取一影像；处理器，电性连接至该存储器及该影像撷取器，且执行下列运作：分析该影像，以产生多个脸部三轴定位值及多个脸部标记识别点；从该等脸部标记识别点取得多个特定标记识别点以产生热区图，将该热区图与一标准热区图比对以产生影像补偿值；基于该影像及该影像补偿值来执行脸部校正处理，以产生虚拟校正影像；分析该虚拟校正影像，以取得瞳孔位移值；以及根据该注视度判断模型、该等脸部三轴定位值及该瞳孔位移值，判断一使用者的注视度。

技术领域

本发明关于一种注视度判断装置及方法。具体而言，本发明关于一种经由辨识影像以判断影像中一人员注视度的装置及方法。

背景技术

随着科技的快速发展，影像处理技术已逐渐地应用于各种摄像装置(例如：监控工厂操作员使用操作面板的摄影装置、卖场货架周围的一般摄影装置)，并因此达到依据目标使用者目光所在的位置，而提供各式相关的信息、服务、推销或是辅助(例如：工厂操作员所注视的操作按钮信息、客户注视货架上产品的相关信息)。

习知的注视度追踪技术主要有两种，第一种是由使用者配戴特殊的眼镜，眼镜上具有可侦测追踪使用者瞳孔移动的传感器，再结合商场的其他传感器或定位器，以判断使用者的注视目标。然而，由于需要使用者配戴额外的硬件且设置额外的传感器，在使用上并不便利且造成布建成本提升，因而无法有效地应用在一般工厂或是卖场中。

习知的第二种注视度追踪技术主要是拍摄使用者的脸部影像，解析影像取得眼睛位置再进一步取得瞳孔位置，然后在不同时间点影像中来追踪瞳孔位移及方向，来判断使用者的注视方向。此类技术需要事先精准地对瞳孔定位，后续才能正确地追踪瞳孔的位移和方向以判断使用者的注视度，通常影像必须具有一定清晰度，才能提高判断的精准度，所以拍摄影像的距离不能太远，通常是在计算机屏幕上安装摄影机进行拍摄。使用者在使用时需要经由使用接口进行繁杂的定位流程，将脸部及五官于使用接口的预设区域进行定位和校正侦测(例如：需在特定焦距内方符合预设的五官大小)，相当费时且使用不便。此外，由于习知的技术在做影像解析取得脸部影像时仅考虑正脸的情形(即，预设人脸的角度是固定的)，而未考虑人脸偏移、转向、侧脸时的角度，因而可能造成明显的误差，且由于需要清晰的脸部影像，使得此类的技术限制在近距离(例如：使用者与摄影机距离在30至45公分之间)的侦测，因此仍然无法有效的运用在商场、工厂或其他环境中。

有鉴于此，如何有效率且精准的判断人员的注视度，而不需要增加额外的硬件建置成本以及繁杂的瞳孔定位，乃业界亟需努力的目标。

发明内容

本发明的一目的在于提供一种注视度判断装置。该装置包含一存储器、一影像撷取器及一处理器，该处理器电性连接至该存储器及该影像撷取器。该存储器存储一注视度判断模型。该影像撷取器，用以撷取一影像。该处理器分析该影像，以产生多个脸部三轴定位值及多个脸部标记(landmark)识别点。该处理器从该等脸部标记识别点取得多个特定标记识别点，以产生一热区图(heatmap)，将该热区图与一标准热区图比对以产生一影像补偿值，其中该影像补偿值指示一脸部位移量。该处理器基于该影像及该影像补偿值来执行一脸部校正处理，以产生一虚拟校正影像。该处理器分析该虚拟校正影像，以取得一瞳孔位移值。该处理器根据该注视度判断模型、该等脸部三轴定位值及该瞳孔位移值，计算一注视度。

本发明的另一目的在于提供一种注视度判断方法，适用于一注视度判断装置。该注视度判断装置包含一存储器、一影像撷取器及一处理器。该存储器存储一注视度判断模型，该影像撷取器用以撷取一影像。该注视度判断方法由该处理器所执行，且包含下列步骤：(a)分析该影像，以产生多个脸部三轴定位值及多个脸部标记识别点，(b)从该等脸部标记识别点取得多个特定标记识别点以产生一热区图，将该热区图与一标准热区图比对，以产生一影像补偿值，其中该影像补偿值指示一脸部位移量，(c)基于该影像及该影像补偿值来执行一脸部校正处理，以产生一虚拟校正影像，(d)分析该虚拟校正影像，以取得一瞳孔位移值，以及(e)根据该注视度判断模型、该等脸部三轴定位值及该瞳孔位移值，计算一注视度。