[发明专利]多媒体交互系统及其方法

权利要求书

1.一种多媒体交互系统，其特征在于，包括：

存储器，用于存储与用户交互所需的交互脚本，所述交互脚本包括预定了播放方式和播放条件的多媒体数据；

多媒体播放子系统；

信息采集子系统，用于采集用户的状态信息和/或所述用户所处环境的环境信息；以及

处理器，与所述存储器、所述多媒体播放子系统和所述信息采集子系统分别连接，用于根据所述状态信息和/或所述环境信息调取所述交互脚本中的多媒体数据，并将所调取的多媒体数据输出至所述多媒体播放子系统；

所述处理器包括：

输入模块，与所述信息采集子系统连接，用于从所述信息采集子系统接收所述状态信息和/或所述环境信息；

调取模块，与所述输入模块和所述存储器分别连接，用于在所述状态信息与所述交互脚本中预定义的多媒体数据的播放条件匹配的情况下，从所述存储器中调取所述匹配的多媒体数据及其播放方式，和/或，参考所述环境信息从所述存储器中调取所述匹配的多媒体数据及其播放方式；

输出模块，与所述调取模块和所述多媒体播放子系统分别连接，用于根据所述播放方式将匹配的多媒体数据输出至所述多媒体播放子系统。

2.根据权利要求1所述的多媒体交互系统，其特征在于，所述状态信息包括用户的姿态信息、语音和生理信息中的任意一种或者多种，所述信息采集子系统包括以下设备的任意一种或者多种：

姿态信息采集设备，用于采集用户的姿态信息；

语音采集设备，用于采集用户发出的语音；

生理信息采集设备，用于采集用户的生理信息；

环境信息采集设备，用于采集所述环境信息。

3.根据权利要求2所述的多媒体交互系统，其特征在于，所述姿态信息采集设备包括体感检测设备、面部识别设备中的任意一种或者多种。

4.根据权利要求2所述的多媒体交互系统，其特征在于，所述语音采集设备包括麦克风、拾音器中的至少一种。

5.根据权利要求2所述的多媒体交互系统，其特征在于，所述生理信息采集设备包括心电检测设备、脑波检测设备、脉搏检测设备、眼动识别设备、声纹识别设备、指纹识别设备、掌纹识别设备、视网膜识别设备中的任意一种或者多种。

6.根据权利要求1所述的多媒体交互系统，其特征在于，所述多媒体播放子系统包括音频播放设备、视频播放设备、全息影像投影设备、虚拟现实设备、增强现实设备、裸眼3D视觉设备中的任意一种或者多种。

7.根据权利要求1所述的多媒体交互系统，其特征在于，所述处理器还包括语音处理模块，

所述语音处理模块与所述输入模块以及所述调取模块连接，用于从所述输入模块获取所述状态信息中的语音，对所述语音进行语音识别、语义分析中的至少一种处理后，将所述语音表达的语义信息发送至所述调取模块；和/或

所述语音处理模块与所述调取模块以及所述输出模块连接，用于将所述调取模块调取的多媒体数据中的文字进行语音合成的处理，并将所合成的语音输出至所述输出模块。

8.根据权利要求1所述的多媒体交互系统，其特征在于，还包括：

环境调节子系统，与所述处理器连接，用于根据所述处理器基于所述环境信息和/或所述交互脚本发出的调节指令对所述用户所处的环境进行调节。

9.根据权利要求8所述的多媒体交互系统，其特征在于，所述处理器还包括：

提醒模块，与所述输入模块和所述输出模块分别连接，用于在特定信号处于预设的参考范围内的情况下，生成相应的提醒信号并输出至所述输出模块，以使得所述输出模块将所述提醒信号发送至相应的提醒设备进行播放，所述特定信号包括所述状态信息和/或所述环境信息。

10.一种多媒体交互方法，其特征在于，采用权利要求1至9中任一项所述的多媒体交互系统与用户交互，所述方法包括：

信息采集子系统采集所述用户的状态信息和/或所述用户所处环境的环境信息；

处理器根据所述状态信息和/或所述环境信息，从存储器中调取与所述用户交互所需的交互脚本中的多媒体数据，并将所调取的多媒体数据输出至多媒体播放子系统，所述交互脚本包括预定了播放方式和播放条件的多媒体数据；

所述多媒体播放子系统播放从所述处理器接收到的多媒体数据。