[发明专利]提供基于结构化富媒体数据的用户界面的装置和方法

说明书

技术领域

本发明一般涉及图形用户界面(UI)，且更具体地，涉及用于提供基于结构化富媒体的UI的装置和方法，其能够产生具有由包括多样化多媒体和交互的富媒体数据组成的结构化UI格式的状况自适应UI。

背景技术

UI是创建用于用户与系统(机器、计算机程序等)之间的临时或经常的交互的物理或虚拟媒介。UI提供由用户用于操作系统的输入手段、以及由系统用于指示用户的操作的效果的输出手段。UI是厂商特定的专有技术。因此，它们一般仅操作于厂商生产的设备，并且未经许可不能被再现或修改。

由于用户的需要及由此对应的服务提供商已经多样化、以及不同的媒体(包括视频、语音、数据等)、服务和网络已经融合的事实，需要公共的用户友好界面。该公共界面将操作于异构的、甚至于远程的设备中而超出传统的单个UI用于单个设备的概念。术语用户友好意味着用户、甚至于初学者需要很少的训练来利用UI处理设备和服务。

用户与设备之间的交互已经从用户与设备之间执行的简单动作演进为智能的行为，其能够识别用户的状况并且基于用户的状况依据关于用户能够做什么、想做什么、以及必须做什么的信息来提供服务。该新UI不同于考虑用户和设备的能力以提供服务并且使用户适应或学习设备和功能的传统的用户为中心的界面。具体地，新UI意图提供更知晓上下文的交互式界面。

当前的技术倾向已经关注于富媒体服务的开发，其中以集成的格式提供包括文字、音频、视频、图片、图形的各种媒体内容。正式地称为ISO/IEC14496-20(MPEG-420)的轻量级应用场景表示(LASeR)、以及称为ISO/IEC14496-11(MPEG-411)的用于场景的二进制格式(BIFS)是代表性的富媒体服务标准。

富媒体服务使用诸如场景描述、视频、音频、图像、字体、文本、元数据、和脚本的数据连同各种多媒体元素的自由表示、以及与用户的交互作用一起提供富集的内容。

图1是说明接收传统富媒体服务的终端的操作的流程图。

参考图1，终端在步骤100接收LASeR，并且在步骤110解码LASeR服务的LASeR内容。终端检查包含在解码的LASeR内容中的LASeR命令。在步骤120由终端执行LASeR命令，并且处理事件以按照预定的格式向用户提供LASeR内容。终端在步骤130通过视频和/或音频处理手段(例如，通过渲染场景)来输出LASeR内容。

LASeR内容可以表示为表1中提供的句法。

表1

参考表1，终端在每次执行LASeR命令(<NewScene>)时渲染和显示包含在对应的LASeR命令中的场景(<svg></svg>)。

发明内容

技术问题

由于传统UI仅是用于用户与终端之间的交互的工具，所述交互是通过诸如键击和按压按钮的动作来执行。然而，用户行为以及五种感觉(即，听觉、视觉、触觉、嗅觉、和味觉)的活动将很快被用作交互的工具。同样，简单的图形UI正演进为包括用户可消费的内容，其扩展到诸如所见即所得(WYSIWYG)界面的用户可配置界面之外。该内容向用户提供类似于最终结果的视图同时该界面被装饰和配置。

因此需要基于富媒体技术使用多样化多媒体元素动态提供支持自由表示和终端-用户交互的富媒体UI。考虑到终端能力和特征、以及用户和终端的服务环境和条件，同样需要提供这样的UI。

技术方案

本发明已经实现来解决至少以上的问题和/或不足并且提供至少以下所述的优点。因此，本发明的一方面提供基于结构化富媒体数据提供UI的装置和方法，其能够适配于用户和终端能力和状况来动态呈现富集的数据。

依据本发明的一方面，提供一种用于提供结构化富媒体UI的方法。在接收终端已经连接到的通信网络上的发送终端处创建包括基本配置信息、具有用于提供UI所需的类型和标识信息的富媒体内容。编码已创建的富媒体UI。将已编码的富媒体UI发送到接收终端。

依据本发明的另一方面，提供一种用于提供结构化富媒体UI的方法。创建包括首标和场景数据的UI格式。首标包括关于该UI的基本信息，而场景数据包括该UI。编码UI格式。发送已编码的UI格式。首标还包括初始信息、配置信息、和布局信息。

依据本发明的另一方面，提供一种用于处理结构化富媒体UI的方法。接收并解码UI场景信息。该场景信息包括诸如UI的类型和标识信息的用于提供富媒体界面的基本配置信息、以及关于包含用于提供UI的各种多媒体和交互的富媒体数据的信息。根据UI模块的判断适配于服务和用户环境提供已解码的富媒体UI。