[发明专利]交互式查看系统

说明书

用于与渲染的环境交互的工具被配置为渲染真实世界环境的表示并接收指示要放置在表示内的缩放窗口的位置的输入。缩放窗口被渲染为具有基于一个或多个标准确定的尺寸。对表示的靠近缩放窗口的位置的部分的放大视图进行渲染。接收指示手势的输入数据，该手势指示缩放窗口的新位置。缩放窗口在UI上重新定位，并且在重新定位期间保持缩放窗口的尺寸。在缩放窗口内，对表示的靠近缩放窗口的新位置的部分的放大视图进行渲染。缩放窗口可移动到表示的任何渲染部分。

背景技术

一些计算系统提供协作环境，以促进两个或更多个参与者之间的通信。提供协作环境的系统可以允许参与者在通信会话中交换实时视频、实时音频和其他形式的数据。协作环境可以采用任何合适的通信会话格式，包括但不限于私人聊天会话、多用户编辑会话、小组会议、广播等。

在促进用户参与方面，某些现有系统存在许多缺点。与协作环境交互的效率低下可能不利于用户的生产力和计算资源的使用。当软件应用程序无法优化用户参与度时，如果参与者无法快速，轻松地查看协作环境并无法选择性地与渲染内容交互，则生产损失和计算资源的效率低下会加剧。例如，现场会议可能涉及显示参与者讨论主题的图像，在会议环境内的显示器上展示资料以及在白板上绘制图形。现有系统缺乏快速，轻松地与此类会议活动进行交互所必需的工具。这样的系统要求用户执行许多菜单驱动的任务以放大感兴趣的区域。例如，当参与者需要有关渲染的会议环境的一部分的更多细节时，参与者必须增加图像的缩放比例。但是，整个渲染的图像会在图像中心周围放大，并且所需的缩放区域可能在或可能不在新的放大图像内。另外，通常会失去保真度。关于这些考虑因素和其他考虑因素，提出了本文进行的公开。

发明内容

本文公开了一种改进的人机界面(“HCI”)，用于与各种环境的表示进行交互，所述各种环境例如是现实环境的三维(“3D”)，并且在一些实施例中，涉及视频会议会话的场景。在各个实施例中，描述了一种用于与利用视频和其他内容的通信环境进行交互的系统。这样的系统可以被称为交互式查看系统。可以结合视频会议会话来提供交互式查看系统。交互式查看系统可以促进共享通信环境，该共享通信环境促进协作和其他活动。例如，交互式查看系统可以以组控制状态呈现在每个参与者的设备上，该组控制状态提供对查看和编辑功能的组控制，并具有将控制权授予各个用户的选项。渲染的环境可以包括各种查看和编辑工具的视图，在使用工具时，每个参与者都可以查看它们。在一些实施例中，渲染的视频会议会话可以被称为舞台画布。在一个实施例中，查看系统允许用户实时地放大或缩小舞台画布视频会议体验中的细节，并操纵在何处以及如何渲染舞台画布。查看系统可以与但不限于视频、图像、3D模型、办公应用程序、捕获的环境/对象、注释、演示、共享位置、注释、表情或其他共享活动进行交互。在一些实施例中，可以在活动舞台画布上实现对用户或交互组可见的重复舞台画布层，并且将其作为独立注释、图片或其他生产力文件类型进行操作。因此，该系统允许在视频会议会话之外提供任何活动。另外，该系统可以允许任何活动被记录并且在不同时间可用。

在一些实施例中，自由浮动的变焦镜头或窗口可以在舞台画布上移动，从而允许用户放大渲染的屏幕体验的所选部分，并标记所选部分，以通过交互式查看系统进行进一步审查和操作。在一些实施例中，语音和/或手势命令可以用于控制交互式查看系统的动作。此外，缩放窗口可以被移动到所描绘的环境的任何区域。在一些实施例中，缩放窗口可以被附接到渲染环境中的特定对象，并且缩放窗口可以随着对象移动或随着渲染的视角改变而跟随该对象。在重新定位缩放窗口期间，缩放窗口内部的缩放比例可以保持恒定。另外，在重新定位缩放窗口期间，缩放窗口的尺寸可以保持不变。

在一些实施例中，缩放窗口可以被配置为提供用于与渲染的环境交互的控件。用户可以例如与在缩放窗口内渲染的图像进行交互。图像可以作为屏幕摘要或其他多媒体对象进行保存和编辑。控件还可以包括编辑渲染环境的图像源，并更改渲染环境的视角，从而允许提高的缩放窗口内图像的保真度和视角。

用于允许用户手动地与表示进行交互的现有系统要求用户执行许多菜单驱动的任务。用户可能花费大量时间搜索可用项目以查找和更改设置，调用其他应用以执行渲染应用所不具有的功能，以及查找与渲染的活动的特定部分相关的内容。这会导致大量不必要的计算资源消耗。