[发明专利]用于存储多源多媒体表示的系统和方法

说明书

相关申请的交叉引用

本申请要求于2008年10年8日提交的美国临时专利申请No.61/103,897的优先权。

技术领域

各种实施方式总体上涉及多媒体表示的存储。更具体地，各种实施方式涉及多源多媒体表示在文件中的存储以用于本地回放或者传输，其中多源多媒体表示指的是呈现针对至少一种类型媒体的多于一个媒体流的那些多媒体表示。

背景技术

这个部分旨在提供记载在权利要求中的发明的背景或者上下文。这里的描述可以包括那些所谋求的概念，但是不必是那些先前已经构思或者继续的概念。因此，除非这里另有指示，否则这个部分中描述的内容并不是本申请中的描述和权利要求的现有技术，并且将该内容包括在这本部分中并不意味着承认其是现有技术。

文件格式是由多媒体内容生产、操纵、传输以及消费链条中的重要要素。编码格式与文件格式之间存在差别。编码模式涉及将内容信息编码成比特流的特定编码算法的动作。相比而言，文件格式包括用于以一种方式组织所生成的比特流的机制，使得其能够被访问以用于本地解码以及回放、被作为文件传输、或者被流式传输，所有这些都利用很多种存储器架构和传输架构。另外，文件格式可以使用以有助于媒体的交换和编辑。例如，许多流式应用要求元数据(存储在“提示轨道”中)伴随服务器上的预编码的比特流，而该元数据辅助该服务器将视频流式传输到客户端。提示轨道并不包含媒体数据，但是相反其包含用于将一个或者多个轨道打包为流式传输信道的指令。

可用的媒体文件格式标准包括国际标准化组织(ISO)基本媒体文件格式(ISO/国际电工技术委员会(IEC)14496-12)(也简称为ISO文件格式)、运动图像专家组(MPEG)-4文件格式(ISO/IEC14496-14)、高级视频编码(AVC)文件格式(ISO/IEC 14496-15)以及第三代合作伙伴项目(3GPP)文件格式(3GPP TS26.244)。在MPEG中正在尝试开发分级视频编码(SVC)文件格式以及多视角视频编码(MVC)文件格式，这两种文件格式预期将会成为AVC文件格式的修订。

ISO文件格式是所有的以上标识的文件格式(除了ISO文件格式本身)衍生的基础。这些文件格式(包括ISO文件格式它本身)称为ISO文件格式家族。根据ISO文件格式家族，每个文件恰好包含与一个表示相对应的一个影片盒(movie box)。影片盒可以包括一个或者多个轨道，并且每个轨道驻留在一个轨道盒中。针对一个媒体类型(例如音频或者视频)的表示，通常选择一个轨道，虽然有可能存在多于一个轨道存储某一媒体类型的信息。这些轨道的子集可以形成替代轨道分群，其中每个轨道可独立地进行解码并且可以选择以用于回放。

在多方会议中，接收器在分屏窗口中显示来自参与者中选定子组的视频，例如图6中示出了一种布置。多点控制单元(MCU)可以将参与者中选定子组的传入视频流代码转换为一个视频流，其包含来自参与者中选定子组的所有视频内容的视频流。替代地，MCU可以简单地将来自参与者中选定子组的传入视频流转发给接收器，在此之后每个视频流被单独地进行解码。

接收器可能想要存储多方会议表示以用于将来使用。然而，如果MCU将流转发给参与者，则当前标准文件格式设计并不支持对多方视频会议表示的存储。接收器可以根据现有的文件格式设计(例如ISO基本文件格式)把将要显示的视频流存储在分离的视频轨道中。然而，在这种情况下，以文件作为输入的播放器无法知道应当对哪些视频轨道进行解码以及将怎样显示相应视频轨道。

在多种其他应用情境中，呈现针对至少一种类型媒体的多于一个视频流的其他类型多源多媒体表示也是有可能的。这样的其他应用情景的示例包括，例如：记录的视频电话，其中存在两个参与者，即呼叫者和应答者；视频监视，其中可以存在大量摄像机(可能装备有音频传感器)，摄像机将会向控制中心发送视听信号；以及记录的培训类表示，其中表示幻灯片以及一个或者多个谈话者可以记录在分离的媒体流中并且稍后对两者进行显示。