[发明专利]基于捏和拉手势检测人工现实系统中的输入在审
申请号: | 202080039024.1 | 申请日: | 2020-05-29 |
公开(公告)号: | CN113874819A | 公开(公告)日: | 2021-12-31 |
发明(设计)人: | 乔纳森·劳沃斯;艾蒂安·平钦;西蒙·查尔斯·蒂克纳;罗伯特·埃利斯;贾斯珀·史蒂文斯;亚当·蒂博尔·瓦尔加;詹妮弗·林恩·斯珀洛克;凯尔·埃里克·索尔格-图米;巴雷特·福克斯 | 申请(专利权)人: | 脸谱科技有限责任公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01;G06F3/0481;G06F3/0482;G06K9/00;G02B27/01 |
代理公司: | 北京安信方达知识产权代理有限公司 11262 | 代理人: | 陆建萍;杨明钊 |
地址: | 美国加利*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 手势 检测 人工 现实 系统 中的 输入 | ||
1.一种人工现实系统,包括:
图像捕获设备,其被配置为捕获代表物理环境的图像数据;
头戴式显示器(HMD),其被配置为输出人工现实内容;
手势检测器,其被配置为从所述图像数据中识别手势,所述手势包括来自手的两个手指的运动以形成捏构形,以及当处于所述捏构形时的后续拉动运动;
用户界面(UI)引擎,其被配置为响应于识别所述手势而生成UI输入元素;和
渲染引擎,其被配置为将所述UI输入元素渲染为对所述人工现实内容的至少一些的叠加。
2.根据权利要求1所述的人工现实系统,其中,为了识别所述手势,所述手势检测器还被配置成:
从所述图像数据中确定所述捏构形在UI捏元素附近。
3.根据权利要求1或权利要求2所述的人工现实系统,其中,所述手势检测器还被配置成:
在识别所述手势之后,识别当所述两个手指处于所述捏构形时所述手的进一步移动。
4.根据权利要求3所述的人工现实系统,其中,所述渲染引擎还被配置为:
响应于所述手的进一步移动并以对应于所述手的进一步移动的方式修改所述UI输入元素;并且优选地,其中为了以对应于所述手的进一步移动的方式修改所述UI输入元素,所述渲染引擎还被配置成:
修改所述UI输入以指示输入值;并且优选地,其中所述渲染引擎还被配置成:
渲染修改的UI输入元素。
5.根据权利要求1至4中任一项所述的人工现实系统,其中,所述手势检测器还被配置为:
从所述图像数据确定所述捏构形已经停止;并且优选地,其中所述用户界面引擎还被配置成:
响应于确定所述捏构形已经停止,识别输入值;和
基于所述输入值,生成更新的人工现实内容;并且优选地,其中所述渲染引擎还被配置成:
渲染所述更新的人工现实内容。
6.根据权利要求1至5中任一项所述的人工现实系统,其中,所述HMD还被配置为输出代表所述物理环境的图像数据的至少一些。
7.根据权利要求1至6中任一项所述的人工现实系统,其中,为了识别所述手势,所述手势检测器还被配置为:
将所述手势识别为对应于手势库中的条目。
8.根据权利要求1至7中任一项所述的人工现实系统,其中,来自所述手的两个手指是拇指和食指。
9.根据权利要求1至8中任一项所述的人工现实系统,其中,所述后续拉动运动包括所述手的拉动运动。
10.根据权利要求1至9中任一项所述的人工现实系统,其中,所述后续拉动运动包括所述两个手指的拉动运动。
11.根据权利要求1至10中任一项所述的人工现实系统,其中,所述图像捕获设备集成在所述HMD内。
12.根据权利要求1至11中任一项所述的人工现实系统,其中,所述UI输入元素是以下中的至少一个:
一维连续变量滑块;
一维离散变量滑块;
开关;
菜单;
径向项目拾取器;
径向滑块;
颜色拾取器;
体积颜色拾取器;或者
进度滑块。
13.一种方法,包括:
由图像捕获设备捕获代表物理环境的图像数据;
由头戴式显示器(HMD)输出人工现实内容;
从所述图像数据中识别手势,所述手势包括来自手的两个手指的运动以形成捏构形,以及当处于所述捏构形时的后续拉动运动;
响应于识别所述手势,生成UI输入元素;和
将所述UI输入元素渲染为对所述人工现实内容的至少一些的叠加。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于脸谱科技有限责任公司,未经脸谱科技有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202080039024.1/1.html,转载请声明来源钻瓜专利网。