[发明专利]音视频播放方法、计算机设备及计算机可读存储介质

权利要求书

1.一种音视频播放方法，其特征在于，包括：

在终端播放可视化内容和/或音频时，确定用户对所述终端的屏幕的第一注意力分数，以及用户对所述终端所播放的音频的第二注意力分数；

若所述第一注意力分数小于第一阈值和/或所述第二注意力分数小于第二阈值，则基于所述第一注意力分数和/或所述第二注意力分数，通过播放状态自适应模型确定可视化内容和/或音频的播放调整模式；

根据所述播放调整模式调整所述终端的屏幕亮度和/或音频播放音量。

2.如权利要求1所述的音视频播放方法，其特征在于，所述第一注意力分数为用户对所述屏幕在视力上的注意力分数，所述第二注意力分数为用户对所述音频在听力上的注意力分数；确定用户对所述终端的屏幕的第一注意力分数，以及用户对所述终端所播放的音频的第二注意力分数，包括：

根据用户的眼睛动作识别结果确定用户对所述屏幕在视力上的注意力分数；

根据用户对音频所作出的反馈信号的强度确定用户对所述音频在听力上的注意力分数。

3.如权利要求2所述的音视频播放方法，其特征在于，根据用户的眼睛动作识别结果确定用户对所述屏幕在视力上的注意力分数包括：

获取用户的眼睛信息，所述眼睛信息包括眼睛睁闭状态信息和虹膜信息；

根据所述虹膜信息确定所述屏幕前方的用户数量；

当所述用户数量为一个时，根据所述眼睛睁闭状态信息确定当前用户对所述屏幕在视力上的注意力分数；

当所述用户数量为多个时，分别根据所述眼睛睁闭状态信息确定多个用户对所述屏幕在视力上的注意力分数，对多个注意力分数进行排序，将分数最高的作为用户对所述屏幕在视力上的注意力分数。

4.如权利要求1所述的音视频播放方法，其特征在于，确定用户对终端屏幕显示信息的第一注意力分数，以及用户对所述终端播放的音频的第二注意力分数包括：

采集终端屏幕前包含用户脸部的场景图像；

从所述场景图像中提取人脸信息；

根据所述人脸信息通过预定部分人脸特征图谱确定所述用户的疲劳程度；

根据所述疲劳程度确定用户对终端的屏幕的第一注意力分数，以及用户对所述终端所播放的音频的第二注意力分数。

5.如权利要求4所述的音视频播放方法，其特征在于，根据所述人脸信息通过预定部分人脸特征图谱确定所述用户的疲劳程度包括：

根据预定部分人脸特征图谱对当前用户进行眼部特征图框池化，通过瞌睡检测网络识别眼部睁闭状态以及对眼部关键点进行回归分析获得眼睛睁闭程度；

根据所述预定部分人脸特征图谱进行嘴部特征图框池化，通过哈欠行为识别网络识别嘴部开闭状态，得到嘴部开闭状态；

根据所述眼睛睁闭状态、所述眼睛睁闭程度和所述嘴部开闭状态确定所述用户的疲劳程度。

6.一种音视频播放装置，其特征在于，包括：

第一确定模块，用于在终端播放可视化内容和/或音频时，确定用户对所述终端的屏幕的第一注意力分数，以及用户对所述终端所播放的音频的第二注意力分数；

第二确定模块，用于若所述第一注意力分数小于第一阈值和/或所述第二注意力分数小于第二阈值，则基于所述第一注意力分数和/或所述第二注意力分数，通过播放状态自适应模型确定可视化内容和/或音频的播放调整模式；

调整模块，用于根据所述播放调整模式调整所述终端的屏幕亮度和/或音频播放音量。

7.如权利要求6所述的音视频播放装置，其特征在于，所述第一确定模块包括：

第一确定单元，用于根据用户的眼睛动作识别结果确定用户对所述屏幕在视力上的注意力分数；

第二确定单元，用于根据用户对音频所作出的反馈信号的强度确定用户对所述音频在听力上的注意力分数。