[发明专利]位置/定向数据的实时传送

说明书

背景技术

许多智能电话、特色电话、平板计算机、数字摄像机和类似设备装备了全球定位系统(GPS)或其他位置感测接收机、加速度计、或数字罗盘。这样的组件可以感测安装了该组件的设备的位置和/或定向。这样的设备还可以装备能够记录协调的视频和音频信息的摄像机。可以用位置感测组件所提供的位置和定向信息来标注视频和音频数据。

附图说明

为了更充分地理解本公开，此时结合附图和详细描述参照以下简要描述，其中，相似的参考标记表示相似的部分。

图1示出了摆动(pan)、倾斜(tilt)和旋转(rotation)的概念。

图2示出了根据本公开实现的实时传输协议(RTP)有效载荷的结构。

图3示出了根据本公开实现的RTP有效载荷中的内容表条目。

图4示出了根据本公开实现的示例RTP位置/定向有效载荷。

图5示出了根据本公开实现的另一示例RTP位置/定向有效载荷。

图6示出了根据本公开实现的具有时间偏移的内容表条目。

图7示出了根据本公开实现的具有时间偏移的两个位置/定向帧的示例。

图8示出了根据本公开实现的具有首部扩展的RTP分组格式。

图9示出了根据本公开实现的包含位置/定向数据的首部扩展。

图10示出了根据本公开实现的RTCP应用分组。

图11示出了根据本公开实施例的在两个设备间交换位置/定向数据的协商。

图12是根据本公开实现的用于提供位置/定向数据的方法的流程图。

图13示出了适于实现本公开的处理器和相关组件。

具体实施方式

首先，应当理解，虽然下文提供了本公开的一个或多个实施例的说明性实现，可以使用当前已知的或现有的任意数目的技术来实现所公开的系统和/或方法。本公开绝不应受限于下述说明性实施方式、附图和技术(包括本文说明和描述的示例设计和实施方式在内)，但可以在所附权利要求的范围连同其完全等价范围内作出修改。

为各种目的，一并引入在此的2012年1月23日提交的题为“Multimedia File Support for Media Capture Device Position and Location Timed Metadata”的美国专利申请13/356,409提出了将时间戳与方位相关参数相关联并将对参数的支持集成于国际标准化组织(ISO)系媒体文件格式或基于ISO系媒体文件格式的文件格式(如第三代伙伴计划(3GPP)或MPEG-4(MP4)文件)。这样，可以在视频文件中记录这样的信息，使得可以在处理视频时或显示视频时使用该信息。

在本公开的实施例中，在多媒体电话或流传输中使用以这样的方式捕捉的位置和/或定向信息。即，可以使用实时流传输来向第二设备发送与第一设备相关联的位置和/或定向(LO)信息。例如，LO数据可用于建立在视频呼叫或游戏中涉及的设备位置和/或定向，用于显示设备位置的地图，用于稳定从非稳定设备接收的图像，或用于其他目的。此处，位置和/或定向信息可一般地称为方位信息。

多种设备(如视频摄像机、摄像机电话、智能电话、个人数字助理、平板计算机和类似设备)能够记录视频和/或音频信息。一些这样的设备可以仅记录视频信息或仅记录音频信息，但此处的讨论将关注与能够记录视频和音频的设备。此处，能够记录视频和/或音频信息的任意这样的装置将被称为设备。在此处描述的一些示例实施例中，可能使用术语“摄像机”代替术语“设备”。然而，应理解：本公开更一般地适用于设备。

设备可能能够以方位数据标记所记录的信息，所述方位数据可以包括地理位置和/或物理定向。即，包含视频和/或音频信息的文件可以与描述文件创建时设备方位的元数据相关联。方位信息可由GPS系统或类似系统确定。

本公开的实现可以将时间戳与设备检测到的位置相关参数和定向相关参数相关联。如以下详细讨论的，位置相关信息可以包括纬度、经度和/或高度，而定向相关信息可以包括摆动、旋转、倾斜和/或缩放。在创建视频和/或音频记录的整个过程中可以连续记录位置相关信息和/或定向相关信息的多个采样，并且可以为采样加时间戳。位置相关和/或定向相关信息可以被记录为视频和/或音频记录期间的静态信息。可以在能够与视频轨和音频轨相关联的元数据轨中记录采样。