[发明专利]基于线下陪访的智能内容推送方法、装置及计算机设备

权利要求书

1.一种基于线下陪访的智能内容推送方法，应用于管理服务器，所述管理服务器与至少一台用户终端通过网络连接实现数据信息的传输，其特征在于，所述方法包括：

实时接收来自所述用户终端的陪访视频信息，根据预置的拆分规则从陪访视频信息中拆分得到客户视频信息及语言答复信息；

根据预置的情绪识别模型对所述客户视频信息进行情绪识别以获取对应的情绪类别；

根据预置的语音识别模型获取与所述客户视频信息及所述语言答复信息对应的第一文字信息及第二文字信息；

根据预存的问答数据库获取所述第二文字信息相对于所述第一文字信息的答复差异信息；

根据预存的内容集合获取与所述情绪类别及所述答复差异信息相匹配的推荐内容作为目标推荐内容并推送至所述用户终端进行播放；

所述拆分规则包括图像获取时间点、图像裁剪规则及差异信息判断规则，所述根据预置的拆分规则从陪访视频信息中拆分得到客户视频信息及语言答复信息，包括：

根据所述图像获取时间点从所述陪访视频信息中获取对应的多张客户图像；

根据所述图像裁剪规则对每一所述客户图像分别进行裁剪以获取每一客户图像的唇形特征图像；

根据所述差异信息判断规则判断任一所述唇形特征图像与相邻的唇形特征图像之间是否存在差异以得到差异判断信息；

根据每一所述唇形特征图像的差异判断信息确定拆分时间点并对所述陪访视频信息进行拆分以得到所述客户视频信息及所述语言答复信息。

2.根据权利要求1所述的基于线下陪访的智能内容推送方法，其特征在于，所述差异信息判断规则包括图像方差计算公式、差异计算公式及差异阈值，所述根据所述差异信息判断规则判断任一所述唇形特征图像与相邻的唇形特征图像之间是否存在差异以得到差异判断信息，包括：

对所述唇形特征图像及所述相邻的唇形特征图像进行灰度处理分别得到对应的第一灰度图像及第二灰度图像；

根据所述图像方差计算公式分别计算所述第一灰度图像及所述第二灰度图像的第一图像方差值及第二图像方差值；

根据所述差异计算公式计算得到所述第一图像方差值与所述第二图像方差值之间的逐行差异值；

判断所述逐行差异值中最大的差异值是否不小于所述差异阈值以获取所述唇形特征图像与相邻的唇形特征图像之间是否存在差异的差异判断信息。

3.根据权利要求1所述的基于线下陪访的智能内容推送方法，其特征在于，所述情绪识别模型包括眼部图像截取模板、梯度计算公式、虹膜特征提取公式及情绪识别神经网络，所述根据预置的情绪识别模型对所述客户视频信息进行情绪识别以获取对应的情绪类别，包括：

根据所述眼部图像截取模板从所述客户视频信息中截取多张客户眼部图像；

对每一所述客户眼部图像进行去色处理得到去色眼部图像；

根据所述梯度计算公式对所述去色眼部图像中的像素点进行计算以获取与每一所述去色眼部图像相匹配的虹膜中心像素点；

根据所述虹膜特征提取公式及所述虹膜中心像素点对每一去色眼部图像进行计算以得到对应的虹膜特征信息；

将所得到的所述虹膜特征信息输入所述情绪识别神经网络以获取与所述客户视频信息对应的情绪类别。

4.根据权利要求1所述的基于线下陪访的智能内容推送方法，其特征在于，所述语音识别模型中包括声学模型、特征词典及语音解析词典，所述根据预置的语音识别模型获取与所述客户视频信息及所述语言答复信息对应的第一文字信息及第二文字信息，包括：

根据所述声学模型对所述客户视频信息中的音频信息及语音答复信息分别进行切分以得到所述音频信息包含的音素及所述语音答复信息包含的音素；

根据所述特征词典分别对所述音频信息包含的音素及所述语音答复信息包含的音素进行匹配转换得到对应的第一拼音信息及第二拼音信息；

根据所述语音解析词典对所述第一拼音信息及第二拼音信息分别进行语义解析以得到对应的第一文字信息及第二文字信息。