[发明专利]沉浸式交互远程呈现在审
申请号: | 201780013054.3 | 申请日: | 2017-02-24 |
公开(公告)号: | CN108702490A | 公开(公告)日: | 2018-10-23 |
发明(设计)人: | N·斯莫尔扬斯基;张正友;V·R·登迪;M·霍尔 | 申请(专利权)人: | 微软技术许可有限责任公司 |
主分类号: | H04N7/18 | 分类号: | H04N7/18;B64C39/02;G01C21/34;G08G5/00 |
代理公司: | 北京市金杜律师事务所 11256 | 代理人: | 王茂华 |
地址: | 美国华*** | 国省代码: | 美国;US |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 运载工具 用户交互 沉浸式交互 轨迹规划器 路线指引 远程呈现 视频 行驶 方向输入 设备接收 位置目标 行驶意图 捕获 重现 | ||
在沉浸式交互远程呈现的实施例中,系统包括运载工具,其捕获对运载工具所行驶的环境的体验,并且该体验包括环境的音频和视频。用户交互设备接收环境的音频和视频,并且用户交互设备中的每个用户交互设备为远离环境的一个或多个用户重现该体验。轨迹规划器被实现为:当运载工具在环境中行驶时基于障碍规避和用户行驶意图来路线指引运载工具。轨迹规划器可以在没有来自运载工具操作者或来自用户交互设备的用户的明确的方向输入的情况下,路线指引运载工具以到达环境中的位置目标。
背景技术
遥控运载工具已经变得越来越流行,特别是行动式(mobilized)机器人、陆地漫游车和无人驾驶飞行器(UAV),通常也称为“无人机”。通常,这些类型的运载工具包括一个或多个相机,其允许运载工具在其中操作的环境的视频被捕获,并且被传送回运载工具的操作者,以用于在操作者的位置处的显示屏上显示。这提供了如果操作者在运载工具的位置或在运载工具上行驶,他或她将看到什么的第一人称视图。这些类型的遥控运载工具通常在操作者和用于远程操作的运载工具之间具有一对一的对应关系或配对,其中用户输入被传达到运载工具,然后运载工具相应地运行。其他类型的系统仅向用户提供远程呈现(telepresence),其中用户可以简单地观看远程环境的视频和/或听到远程环境的音频,但是不能够控制发送回远程环境的视频和音频的运载工具、设备或系统。
发明内容
本发明内容介绍了沉浸式交互远程呈现的特征和概念,其在下面的具体实施方式中被进一步描述和/或在附图中被示出。本发明内容不应被视为描述了所要求保护的主题的必要特征,也不被用于确定或限制所要求保护的主题的范围。
描述了沉浸式交互远程呈现。在实施例中,一种系统包括:运载工具,其捕获对运载工具所行驶的环境的体验,并且该体验包括环境的音频和视频。运载工具可以是以下各项中的任一类型:无人机、潜水器、陆地漫游车、行动式计算设备、人类相机载体和/或任何其他类型的相机运输工具。用户交互设备接收环境的音频和视频,用户交互设备中的每个用户交互设备为远离环境的一个或多个用户重现体验。轨迹规划器被实现为当运载工具在环境中行驶时,基于障碍规避和用户行驶意图来路线指引(route)运载工具。轨迹规划器可以在没有逐步行驶指令的情况下路线指引运载工具,以到达环境中的位置目标,例如在没有来自运载工具操作者或来自用户交互设备的用户的明确的方向输入的情况下。轨迹规划器还可以基于与用户交互设备的用户相关联的先前的运载工具路线指引,或者基于在车辆开始在环境中行驶之前所提供的用户偏好,确定用于路线指引运载工具的用户行驶意图。然后,轨迹规划器可以基于所确定的用户行驶意图改变运载工具在环境中的路线。
在其它方面,运载工具可以由远离环境的用户委托(commission),以捕获对环境中的感兴趣区的体验,其中感兴趣区由用户选择,或者感兴趣区由轨迹规划器基于用户行驶意图来选择。运载工具可以基于轨迹规划器来控制,该轨迹规划器经由用户交互设备从用户接收行驶指令,以用于运载工具的用户指导的行驶;和/或基于在运载工具的环境中的运载工具操作者,其指导运载工具的路线。
在其它方面,运载工具可以包括相机系统,以将视频捕获为环境的广角视图;并且视频被路由到用户交互设备,其中用户中的每个用户可以基于用户在环境的广角视图内观看的位置来查看环境的不同部分。轨迹规划器还可以以稳定运动来路线指引运载工具,稳定运动对最小化用户交互设备的一个或多个用户的晕动症有效。
在其它方面,运载工具可以是环境中的虚拟旅行向导,捕获对环境的体验作为用于用户交互设备的用户的虚拟旅行。轨迹规划器被实现为路线指引运载工具,路线指引对促进虚拟旅行有效。在实现中,运载工具是空中无人机,其在环境的区域上方飞行,以为用户交互设备的用户捕获对该区域的体验。附加的空中无人机可以在环境的不同区域上方飞行,空中无人机将用户切换到附加的空中无人机中为用户交互设备的用户捕获对环境的不同区域的体验的一个空中无人机。轨迹规划器可以基于用户选择的环境的不同区域来发起将用户切换到附加的空中无人机,或者轨迹规划器可以基于用户行驶意图来选择环境的不同区域。
附图说明
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于微软技术许可有限责任公司,未经微软技术许可有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201780013054.3/2.html,转载请声明来源钻瓜专利网。
- 上一篇:包括多个相机的电子设备及其操作方法
- 下一篇:信息处理装置以及程序