[发明专利]一种感应式灯光音响管理系统和方法

权利要求书

1.一种感应式音响灯光管理系统，所述感应式音响灯光管理系统对场景的灯光音响调控，其特征在于，包括：

图像采集模块；

音频采集模块；

分析处理模块；

调度模块；

其中所述图像采集模块采集每一目标的眼动数据、人脸数据，所述音频采集模块采集目标的语音数据，所述图像采集模块和音频采集模块将所述眼动数据、人脸数据和语音数据输入所述分析处理模块，以获取每一目标的兴趣信息和情感信息，用于调整灯光音响设计，所述调度模块根据获取的兴趣信息、情感信息调度终端音响和灯光设备；

所述图像采集模块将采集到的眼动数据输入所述分析处理模块的眼动分析系统，记录每一时刻每一观众的眼动数据，以获取观众对场景灯光的兴趣点、兴趣区域、兴趣顺序和兴趣时段，用于所述调度模块调度灯光音响终端。

2.根据权利要求1所述的一种感应式音响灯光管理系统，其特征在于，所述图像采集模块将获取的人脸数据转化为特征向量，将所述特征向量输入到Emotion-recognition模型，输出并统计表情类型和数目。

3.根据权利要求1所述的一种感应式音响灯光管理系统，其特征在于，所述音频采集模块采集观众的语音信息，将采集到的语音信息输入所述分析处理模块，用于获取语音信息中的评价信息和语气信息。

4.根据权利要求1所述的一种感应式音响灯光管理系统，其特征在于，采用包括TobiiStudio系统、Eyeso系统和Vive Pro Eye系统中的任意一种分析眼动数据。

5.根据权利要求1所述的一种感应式音响灯光管理系统，其特征在于，所述分析处理模块还用于预设定一主题场景，所述分析处理模块计算人脸表情信息和语音信息中符合主题场景的个数和比例，用于评价场景灯光和音响的设计和管理效果。

6.根据权利要求1所述的一种感应式音响灯光管理系统，其特征在于，所述感应式音响灯光管理系统还包括一评价模块，所述评价模块接收所述分析处理模块的统计信息，输出灯光音响设计的场景主题符合度。

7.一种感应式音响灯光管理方法，其特征在于，包括如下步骤：

预设一场景主题，所述主题包括悲伤、喜悦、兴奋、刺激、恐惧的情感标签；

获取该场景主题下每一测试人员的眼动数据、人脸数据和语音数据分析目标人表情信息、语音信息，兴趣信息和语气信息；

计算表情信息、语音信息和语气信息中符合主题场景的个数和比例；

根据眼动数据统计每一测试者对灯光和音响兴趣信息中的兴趣点、兴趣区域、兴趣顺序和兴趣时段；

根据所述兴趣信息、语音信息、表情信息和语气信息调度主题场景中灯光和音响设计。

8.根据权利要求7所述的一种感应式音响灯光管理方法，其特征在于，通过分析处理模块将分析处理的表情信息、语音信息、语气信息分别打上对应主题的标签，并计算符合预设主题标签的比例。

9.根据权利要求8所述的一种感应式音响灯光管理方法，其特征在于，所述分析处理模块设定第一比例阈值，若检测计算单位时间内的表情信息、语音信息和语气信息符合预设场景主题比例小于所述第一比例阈值，则重建该单位时间内的灯光和音响设计。

10.根据权利要求9所述的一种感应式音响灯光管理方法，其特征在于，所述分析处理模块设定第二比例阈值，其中所述第二比例阈值大于所述第一比例阈值，若检测计算单位时间内的表情信息、语音信息和语气信息符合预设场景主题比例大于所述第二比例阈值，则保存该单位时间内的灯光和音响设计，用于调度模块优先调度保存的该单位时间灯光和音响设计。

11.根据权利要求10所述的一种感应式音响灯光管理方法，其特征在于，若所述检测计算单位时间内的表情信息、语音信息和语气信息符合预设场景主题比例在所述第一比例阈值和第二比例阈值之间，部分删除或间隔一定的时间删除该单位时间内 灯光和音响设计。

12.根据权利要求10所述的一种感应式音响灯光管理方法，其特征在于，若分析处理模块计算并形成单位时间内灯光设计中眼动数据热点图，所述分析处理模块根据热点保存灯光设计布局，以供所述调度模块随机调取。