[发明专利]用于流式传输触觉效果的系统、设备和方法

说明书

本申请涉及用于流式传输触觉效果的系统、设备和方法。提供了用于流式传输触觉效果的系统、设备和方法。提供了设备和方法以用于创建接收触觉效果和根据主触觉库编码触觉效果的系统。经编码的触觉效果被发送到服务器系统以分发给客户端触觉设备。客户端触觉设备包括设备特定触觉库，以用于根据相应设备的能力解码接收到的触觉效果。

技术领域

本文的实施例涉及用于流式传输(streaming)触觉效果的系统、设备和方法。特别地，本文的实施例提供了用于从触觉效果创作者到一个或多个接收方客户端触觉设备的触觉效果的创作、编码、流式传输、解码和重放的技术。

背景技术

单独的或与包括视听格式的传统媒体格式组合的触觉效果提供增强的用户体验。触觉效果流可以与视听流组合以增强流式传输媒体的用户体验，无论该流式传输媒体是直播流式媒体还是预先录制的流式传输媒体。客户端触觉设备包括一个或多个触觉致动器，以将触觉效果流的触觉效果传递给用户。但是，不同型号客户端触觉设备可以包括不同的致动器组并因此具有不同的输出能力。输出能力可能在可用的触觉效果、输出的幅度、输出的带宽以及触觉效果的其它特性方面不同。

各种型号的客户端触觉设备的输出能力的差异会导致设计触觉效果的困难。例如，准备触觉效果的操作者或用户(例如，触觉设计者)可能必须决定是设计仅包括大多数设备能够再现的效果子集的触觉效果还是利用新的和不同的触觉能力。甚至用于常见触觉效果的常见致动器可能在个体规格和特性方面不同。为多个不同设备设计不同的触觉流是不切实际且繁琐的。

常规的启用触觉的(haptically enabled)显示设备存在这些和其它缺点。这些缺点通过本文描述的发明来解决。

发明内容

本发明的实施例包括用于一对多(one-to-many)触觉流创作、流式传输和重放的端到端(end-to-end)系统。触觉创作系统接收触觉效果的流，这些触觉效果在被发送到系统时要么由操作者预先录制要么由操作者创作。触觉效果的流还可以包括“触觉轨迹(haptic track)”，即，一系列触觉效果。创作系统通过根据操作者期望的基本触觉元素与内容标识符之间的关联的库来编码触觉效果，从而将流中的每个触觉效果分解成内容标识符的触觉块。创作系统不是发送触觉流的原始数据，而是将触觉块发送到触觉服务器系统。触觉服务器系统与触觉客户端设备连接，向它们供应用于解码触觉块的设备特定(device-specific)库，并将触觉块发送到触觉客户端设备。然后，触觉客户端设备通过将接收到的内容标识符与可由触觉客户端设备播放的基本触觉元素相关联来解码触觉块。因此，触觉设计者创建单个触觉流，然后该单个触觉流可以被编码并且被发送到具有不同重放能力的多个触觉客户端设备。

在实施例中，提供了一种编码触觉输入以用于传输的计算机实现的方法。该方法在具有用计算机程序指令编程的一个或多个物理处理器的计算机系统上执行，这些计算机程序指令在由所述一个或多个物理处理器执行时使得计算机系统执行该方法。该方法包括访问主触觉库，该主触觉库存储内容标识符与设计的触觉效果之间的关联，设计的触觉效果包括第一触觉块模板和第二触觉块模板。该方法还包括：接收触觉效果信息；基于触觉效果信息，根据第一触觉块模板生成第一触觉块；以及根据触觉效果信息将第一时间戳附加到第一触觉块。该方法还包括：基于触觉效果信息，根据第二触觉块模板从主触觉库生成第二触觉块；根据触觉效果信息将第二时间戳附加到第二触觉块；以及将第一触觉块及第一时间戳与第二触觉块及第二时间戳一起封装到触觉数据单元中。该方法还包括将触觉数据单元发送到触觉服务器以用于分发给一个或多个客户端触觉设备。