[发明专利]一种基于人眼追踪的平视随动控制系统和控制方法有效
申请号: | 201910535181.0 | 申请日: | 2019-06-20 |
公开(公告)号: | CN110244778B | 公开(公告)日: | 2022-09-06 |
发明(设计)人: | 薛瑞彬 | 申请(专利权)人: | 京东方科技集团股份有限公司 |
主分类号: | G05D3/12 | 分类号: | G05D3/12;G10L15/22;G06F3/01 |
代理公司: | 北京正理专利代理有限公司 11257 | 代理人: | 付生辉 |
地址: | 100015 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 追踪 平视 控制系统 控制 方法 | ||
1.一种基于人眼追踪的平视随动控制系统,其特征在于,包括人眼追踪单元、平视显示单元和随动控制单元,其中
所述人眼追踪单元,用于追踪观看者的人眼在所述平视显示单元对应的显示区域上的注视点;
所述随动控制单元,用于根据所述注视点与预置的中心点的距离生成调整指令;
所述平视显示单元,用于根据所述调整指令调整所述平视显示单元的显示区域的位置;
还包括语音控制单元和习惯分析单元,所述语音控制单元包括语音识别单元和语音合成单元,所述习惯分析单元包括采集单元、习惯模型和处理器单元,其中
所述语音识别单元,用于识别接收的语音指令并发送至所述随动控制单元,使得所述随动控制单元根据所述语音指令调整所述调整指令;
所述语音合成单元,用于合成并发送语音信息;
所述采集单元,用于采集所述观看者的行为习惯并发送至所述处理器单元,所述行为习惯包括喝水、看手机、看左侧或右侧的后视镜或窗外、操作中控;
所述处理器单元,用于根据所述行为习惯训练所述习惯模型,并根据所述习惯模型的输出结果向所述随动控制单元和语音控制单元发送提示信息,当所述语音控制单元接收所述习惯模型输出的结果时通过语音进行行为确认或提示,当所述随动控制单元接收所述习惯模型输出的结果时,确定观看者的行为为习惯行为则不因该行为导致的注视点移动而调整显示区域,以降低调整显示区域的频率。
2.根据权利要求1所述的控制系统,其特征在于,所述平视显示单元包括光源、凹面反射镜和控制单元,所述控制单元根据所述调整指令调整所述凹面反射镜的俯仰角和滚转角,将所述光源发射的显示影像投射到对应的显示区域。
3.根据权利要求1所述的控制系统,其特征在于,还包括云服务器,用于存储、训练和/或更新所述习惯模型。
4.一种利用权利要求1所述的控制系统的控制方法,其特征在于,包括:
追踪观看者的人眼在平视显示单元对应的显示区域上的注视点;
根据所述注视点与预置的中心点的距离生成调整指令;
根据所述调整指令调整所述平视显示单元的显示区域的位置;
所述控制系统还包括用于识别接收语音指令的语音识别单元和用于合成并发送语音信息的语音合成单元,在所述根据所述注视点与预置的中心点的距离生成调整指令之后,所述控制方法还包括:根据所述语音合成单元和语音识别单元对所述观看者进行调整确认,并根据确认结果调整所述调整指令;
所述控制系统还包括习惯分析单元,在所述追踪观看者的人眼在平视显示单元对应的显示区域上的注视点之前,所述控制方法还包括:通过所述习惯分析单元采集所述观看者的行为习惯并根据所述行为习惯训练习惯模型,所述行为习惯包括喝水、看手机、看左侧或右侧的后视镜或窗外、操作中控;在所述根据所述注视点与预置的中心点的距离生成调整指令之后,所述控制方法还包括:根据所述习惯模型的输出结果生成提示信息,根据所述提示信息调整所述调整指令和/或发送语音信息,当所述语音控制单元接收所述习惯模型输出的结果时通过语音进行行为确认或提示,当所述随动控制单元接收所述习惯模型输出的结果时,确定观看者的行为为习惯行为则不因该行为导致的注视点移动而调整显示区域,以降低调整显示区域的频率。
5.根据权利要求4所述的控制方法,其特征在于,
所述根据所述注视点与预置中心点的距离生成调整指令包括:
以所述中心点为中点、以预设长度为半径设置中心显示区域;
计算所述注视点与中心点的距离;
判断所述距离是否大于预设置的第一距离且小于预设置的第二距离,若是则生成调整距离为所述距离的调整指令;
和/或:
所述平视显示单元包括光源、凹面反射镜和控制单元,所述根据所述调整指令调整所述平视显示单元的显示区域的位置包括:
所述控制单元根据所述调整指令的调整距离获取预期显示区域的调整中点;
所述控制单元根据所述调整中点调整所述凹面反射镜的俯仰角和滚转角;
将所述光源发射的显示影像投射到所述预期显示区域。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于京东方科技集团股份有限公司,未经京东方科技集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910535181.0/1.html,转载请声明来源钻瓜专利网。