[发明专利]用于语音-文本和文本-面部动画转换的通信网络和设备

说明书

技术领域

本发明涉及通信网络和一种用于在通信网络上发送和接收消息的设备。本发明还涉及一种向用户呈现消息的新方法，以及一种可以用于向消息阅读方呈现与消息发送方相关联的面部图像的数据结构编码信息。

背景技术

现今有很多不同的通信网络正被广泛使用，以便能够执行远距离个人通信。传统上，唯一的通信形式是发送信件或使用电话，但是最新趋势业已注意到了即时或准即时书面通信的进展。关于此类通信形式的示例是电子邮件和文本消息(或者更确切地说是SMS或MMS消息)。

对电子邮件和文本消息而言，发送方将消息键入诸如移动电话或个人计算机之类的发送方设备。然后，该消息经由电子网络发送到接收方设备。之后，用户可以拾取所发送的消息，并且将文本显示在与该设备相关联的显示屏上。

虽然这些通信形式经证实是广受欢迎的，并且对年纪较小的用户来说尤其如此，但是，由于这些通信形式无法表现发送方感情，人们觉得此类消息被误解也已经有一段时间了。此外，这些通信形式有些不讲人情，并且很难被存在视觉障碍的用户阅读。

针对该问题的一个局部解决方案是开发了一种符号系统，这些符号被称为情感符(emoticons)，并且可以包含在键入的消息中。这些符号描绘的是表情，并有助于读者确定发送方意图表达的情感。例如，可以插入“笑”脸以显示发送方很快乐。

发明内容

本发明至少一个方面的目的是至少部分改善将表情或其他个性化形式包含在经由通信网络发送的键入消息、例如文本消息、电子邮件或即时消息中的问题。

根据第一个方面，本发明提供了一种通信系统，包括：

发送设备，

接收设备，以及

将发送设备连接至接收设备的网络；

其中所述发送设备包括：

用于输入作为消息的文本字符序列的至少一个用户可操作输入，以及用于在网络上发送消息的传输装置；

其中所述接收设备包括：

存储多个头部图像的存储器，每个头部图像与不同发送设备相关联并且包含从前方看到的头部图像；

接收方装置，用于接收包含文本字符序列的消息；

文本-语音转换装置，用于将消息的文本字符转换成与文本字符序列相对应的音频消息；

动画装置，用于从存储在存储器中的、与消息的发送方相关联的头部图像中产生头部的动画化的局部3D图像；所述动画装置将头部的至少一个面部特征动画化，所述动画与头部在阅读消息时所做出的运动相对应；显示装置，用于显示动画化的局部3D头部；以及扬声器装置，用于以与所显示的头部同步的方式输出音频消息。

通常，人与人之间的通信中传达的大多数意图和认知都是利用面部表情以及一个人对另一个人的面部外形的熟悉度来传送的。在本发明中，面部特征的表示能具有很高的精确度，这是因为其可以基于用户或发送方的数码照片，而数码照片业已成为一种很好的相似物并且它能将这里描述的动画化的局部3D图像作为消息发送方的逼真且可识别的表示(或画像)来呈现给接收方。

与传输和显示纯文本消息相比，通过在接收设备上执行将文本消息转换成动画化的语音消息的处理，不会在网络上造成附加负担。此外，通过从预先存储在接收设备的存储器中的图像再现动画化的头部，可以不必用所发射的消息来发送图像。另外，通过使用局部3D而不是完整3D再现(rendering，或呈现)，可以进一步减轻计算负担。

就局部3D而言，我们指的是所述动画显示的头部并不是头部的完整3D表示。从某种意义上讲，它可以包括2D图像(头部图像可以是2D图像，例如用相机拍摄的照片)，所述2D图像有几处变形，从而在Z平面上为其提供一定深度，以使面部特征从2D平面上凸起。图像的其他部分可以保持2D。这种局部3D图像是一个存在失真并且显现为3D的2D图像。只要简单改变与图像边界相对应的基准平面方位，所显示的图像即可从左向右略微倾斜。由于该面部特征在Z平面上具有指定深度，因此，在被倾斜的时候，在显示器上看到的图像将看起来确实是3D的。该网格还可以在三个平面上旋转，以使头部看起来像是朝着一侧倾斜，或是在点头动作中轻微上下，抑或是左右摆动。

由此，存储器可以包括由一组互连节点限定的3D网格，所述互连节点在Z平面中为本来是2D头部图像给出一深度。通常，所述节点可以全都处于围绕网格边界的一个平面中，并且边界内的节点可以高出所述平面以便与面部特征相对应。动画装置可以通过将头部头像重叠在网格上，使得头部图像面部区域的面部特征与网格中升高的面部特征相对准来产生局部3D头部图像。由此，面部特征会在Z平面前推。而诸如头发之类的其他头部部分则可以通过落入边界以内而保持平坦。