[发明专利]基于重要性等级产生富媒体的系统和方法及应用于其的服务器

说明书

技术领域

本发明涉及用于传输富媒体(rich media)的方法，更具体地涉及能 够在传输富媒体时通过考虑网络环境和组成富媒体的多个媒体(piece of media)的重要性等级来根据网络环境优化要传输的富媒体的富媒体服务 器、富媒体传输系统和富媒体传输方法。

背景技术

用于通过有线通信网络(如，特高速因特网)或通过无线通信网络 (如，IMT2000)，基于通信系统提供多媒体内容服务的方法和系统受到 关注。

尤其，通过有线/无线终端发送/接收静止图片、移动图片和音乐文件 (如，MP3文件)以及声音和文本的功能已经被添加到终端、或者已经 通过与外部装置连接而实施。因此，奠定了用于通过有线或无线发送/接 收多媒体内容文件的技术基础，并且还奠定了用于使消费者能够自己创 建多媒体内容文件以及通过有线/无线通信网络传播所创建的多媒体内容 文件的技术基础。

同时，由于有线或无线终端组成的用户终端不具有能够将提供的所 有无数媒体(如，静止图片和移动图片)再现为多媒体内容文件的与媒 体再现有关的性能，因此生成无法被再现的媒体是不可避免的。

存在无数种类的媒体，包括文本、静止图片、移动图片等，其中， 音频类型基于用于再现的文件扩展名包括mpa、mp3、mp2、wma、wav 等，而移动图片的类型基于用于再现的文件扩展名包括wmv、avi、divx、 asf、mpg等。

如上所述，由于存在无数种类的媒体，因此对于用户终端来说，具 有能够再现所有类型媒体的编解码器是不容易的。

而且，由于从再现各种媒体的性能的角度来讲，用户终端通常具有 比个人计算机(PC)更低的处理能力，从在用户终端的屏幕上显示相应 媒体所需要的硬件性能的角度来讲，用户终端具有较差的处理能力，所 以这与移动终端不具有编解码器的事实一起限制了可以被再现的媒体。

附带地说明用户终端的硬件处理能力，当再现两个或更多个媒体， 而不是再现一个媒体时，硬件处理能力经常达到其极限。

通常地，再现两个或更多个媒体(例如，移动图片)的用户终端包 括：用于存储压缩的移动图片文件的存储器、用于解压缩并输出在存储 器中存储的第一移动图片文件的第一解码器、用于解压缩并输出在存储 器中存储的第二移动图片文件的第二解码器、用于组合并且输出从第一 和第二解码器输出的移动图片帧的图像处理器、用于显示从图像处理器 输出的数据的显示单元以及用于执行再现媒体处理的控制器。

存储器可以是一个或更多个闪速存储器、一个或更多个硬盘、一个 或更多个光盘存储装置，或其组合。

第一和第二解码器各由数字信号处理器组成，该数字信号处理器具 有能够再现以多种格式压缩的文件的柔性机构。各解码器可以支持 MPEG-4、H.263、MPEG-2等中的一种或更多种格式。

尽管两个解码器同时工作，但是这两个解码器可以再现互不相同格 式的移动图片文件。

各解码器从指定时间点开始再现特定移动图片文件。对于各解码器 来说都支持双速播放功能和低速播放功能等。

使具有这些功能的解码器商业化并且提供具有这些功能的解码器， 并且与解码器关联的编解码器解压缩文件并且输出标准格式(如，YUV 或RGB)的图像帧。

图像处理器可以放大或缩小相应的输入图像帧，或可以组合两个图 像。

例如，可以分别缩小两个移动图片并且在被分为两个区域的一个画 面上分别显示两个移动图片。另外，一个移动图片帧可以在整个画面上 显示为主画面，而另一个移动图片帧被缩小并且以画中画(PIP： Picture-In-Picture)形式显示。

但是，这种传统用户终端可以同时在终端的屏幕上再现并且输出两 个媒体，尤其是两个移动图片，但是为了同时再现三个或更多个移动图 片该用户终端必须具有优越的性能。同样地，由于不是所有的传统用户 终端都被设计为通过其内部操作再现两个移动图片，因此，可能出现不 能在用户终端中再现的移动图片。

而且，在从服务器向用户终端提供预定媒体的服务过程中，当由于 传输环境，组成各元素的一个或更多个媒体在被发送给用户终端时丢失 时，负面影响会施加在整个服务性能上。因此，通常，服务器重传丢失 的媒体，或者发送纠错码使得当媒体中发生丢失时可以恢复该媒体。