[发明专利]3D互动方法及系统在审
申请号: | 201811589001.9 | 申请日: | 2018-12-25 |
公开(公告)号: | CN109640072A | 公开(公告)日: | 2019-04-16 |
发明(设计)人: | 孙志红;张龙;吴宏涛 | 申请(专利权)人: | 鸿视线科技(北京)有限公司 |
主分类号: | H04N13/383 | 分类号: | H04N13/383;H04N13/398;H04N13/327;G06F3/01;G06K9/00 |
代理公司: | 北京世衡知识产权代理事务所(普通合伙) 11686 | 代理人: | 史琳琳;肖淑芳 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 移动终端 互动 用户姿势识别 自适应调节 立体视频 屏幕播放 人眼特征 深度信息 视差信息 图像生成 用户位置 用户行为 右眼图像 自动校准 左眼图像 右图像 左图像 视差 投放 播放 | ||
本发明公开了一种3D互动方法及系统,所述方法基于用户位置、特定用户人眼特征获取视差信息,并基于现有的图像生成左图像、右图像,进而形成立体视频,所述方法能够使得移动终端在播放左眼图像和右眼图像时,能够针对特定的人自适应调节视差,并可基于深度信息对用户姿势识别,实现3D交互。本发明能够实现对移动终端或投放屏幕播放位置的自动校准,并能够基于用户行为进行交互。
技术领域
本发明属于立体图像处理领域,尤其涉及3D互动方法及系统。
背景技术
传统的三维图像播映方式为:通过投影设备将图像投放到屏幕上,观看者戴上立体眼镜即可观看到屏幕上的三维图像。但是,这种方式无法根据观看者位置的变化,自适应调节屏幕上的三维图像位置,尤其是在移动终端如pad,智能手机上进行立体图像视频播放时,无法进行终端播放位置的校准,也无法实现与用户的交互。
发明内容
为解决现有技术的不足,本发明的目的在于提供一种3D互动方法及系统,该方法能够实现对移动终端或投放屏幕播放位置的自动校准,并能够基于用户行为进行交互。
为了实现上述目标,本发明采用如下的技术方案:
一种3D互动方法,包括以下步骤:S1,获取用户的位置,并基于用户位置获取用户距离屏幕的距离;S2,基于预先设定的用户距离屏幕的距离与视差的关系,获取当前用户距离屏幕的距离对应的视差;S3,基于所述视差,将当前投放屏幕或移动终端屏幕上播放的视频或图像数据生成两张图像,该两张图像分别对应于左眼图像、右眼图像;S4,将所述左眼图像、右眼图像同时播放在投放屏幕或移动终端屏幕上,从而使得用户能够观看到立体视频;S5,在固定间隔对用户的位置进行检测,重新获取用户的位置,从而能够基于用户的位置的变化自动调节所述视差;其中,当利用移动终端播放所述图像时,获取当前用户距离屏幕的距离对应的视差还包括:利用移动终端摄像头获取用户的图像,利用人脸识别的方式识别两只眼睛的位置,并获取两只眼睛的中点,将该点对移动终端的几何中心进行校准,重新获取用户的位置还包括重新获取用户眼睛的位置,并进行移动终端的几何中心进行校准;从而使得移动终端在播放左眼图像和右眼图像时,能够针对特定的人自适应调节视差。
所述方法进一步包括:步骤S6,利用深度摄像机实现对用户位置的追踪、标记,利用图像处理的方法提取用户的姿势信息,利用所述姿势信息控制播放内容的改变。
相应的,本申请还包括一种3D互动系统,该系统包括:位置获取模块,获取用户的位置,并基于用户位置获取用户距离屏幕的距离;视差获取模块,基于预先设定的用户距离屏幕的距离与视差的关系,获取当前用户距离屏幕的距离对应的视差;图像生成模块,基于所述视差,将当前投放屏幕或移动终端屏幕上播放的视频或图像数据生成两张图像,该两张图像分别对应于左眼图像、右眼图像;图像播放模块,将所述左眼图像、右眼图像同时播放在投放屏幕或移动终端屏幕上,从而使得用户能够观看到立体视频;自适应调节模块,在固定间隔对用户的位置进行检测,重新获取用户的位置,从而能够基于用户的位置的变化自动调节所述视差;其中,当利用移动终端播放所述图像时,获取当前用户距离屏幕的距离对应的视差还包括:利用移动终端摄像头获取用户的图像,利用人脸识别的方式识别两只眼睛的位置,并获取两只眼睛的中点,将该点对移动终端的几何中心进行校准,重新获取用户的位置还包括重新获取用户眼睛的位置,并进行移动终端的几何中心进行校准;从而使得移动终端在播放左眼图像和右眼图像时,能够针对特定的人自适应调节视差。
所述系统进一步包括:互动模块,利用深度摄像机实现对用户位置的追踪、标记,利用图像处理的方法提取用户的姿势信息,利用所述姿势信息控制播放内容的改变。
本发明的有益之处在于:可以自适应的基于用户的个体特征、位置特征进行3D图像播放的校准,并可以基于深度信息进行用户位置的识别、追踪,实现用户与播放内容互动,提高立体播放的娱乐效果,并可在游戏等领域中,基于用户动作实现操作控制,提高易用性。
附图说明
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于鸿视线科技(北京)有限公司,未经鸿视线科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811589001.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:双目竞争管理
- 下一篇:一种裸眼3D显示装置的检测方法及装置