[发明专利]盲人辅助沟通方法、装置、计算机设备和存储介质

说明书

本申请涉及图像检测及大数据处理分析领域，特别涉及一种盲人辅助沟通方法、装置、计算机设备和存储介质。所述方法包括：接收辅助分析启动指令；根据辅助分析启动指令采集沟通对象的实时人像图像；获取预存人脸图像，根据预存人脸图像对实时人像图像进行人脸检测；当检测出存在与实时人像图像匹配的预存人脸图像时，对实时人像图像进行情绪分析得到沟通对象的当前情绪；查找与当前情绪对应的沟通建议，将沟通建议输出。采用本方法能够能够辅助视力障碍人士沟通交谈。

技术领域

本申请涉及计算机技术领域，特别是涉及一种盲人辅助沟通方法、装置、计算机设备和存储介质。

背景技术

目前，全世界具有视力障碍的人群超过一亿人，他们大多只能通过语言与他人进行交流，而研究发现除语言之外，表情是人与人之间情感交流的主要手段，而具有视力障碍的人无法感知对方真实的喜怒哀乐等情绪变化，从而影响与其他人的情感交流。因此，目前缺乏能够帮助具有视力障碍人士感知交谈对象情绪的有效方法。

发明内容

基于此，有必要针对上述技术问题，提供一种能够辅助视力障碍人士沟通交谈的盲人辅助沟通方法、装置、计算机设备和存储介质。

一种盲人辅助沟通方法，所述方法包括：

接收辅助分析启动指令；

根据所述辅助分析启动指令采集沟通对象的实时人像图像；

获取预存人脸图像，根据所述预存人脸图像对所述实时人像图像进行人脸检测；

当检测出存在与所述实时人像图像匹配的所述预存人脸图像时，对所述实时人像图像进行情绪分析得到所述沟通对象的当前情绪；

查找与所述当前情绪对应的沟通建议，将所述沟通建议输出。

在其中一个实施例中，所述实时人像图像进行情绪分析得到所述沟通对象的当前情绪，包括：

对所述实时人像图像进行微表情分析，得到与所述实时人像图像匹配的第一预设微表情；

获取所述第一预设微表情对应的各情绪模式下的情绪分值；

根据所述情绪分值计算各所述情绪模式对应的情绪得分；

根据所述情绪得分判定所述沟通对象的当前情绪。

在其中一个实施例中，所述对所述实时人像图像进行微表情分析，得到与所述实时人像图像匹配的第一预设微表情，包括：

从所述实时人像图像中提取面部特征点；

根据所述面部特征点得到面部动作特征；

将所述面部动作特征输入微表情分类模型得到各所述预设微表情的概率值；

根据计算出的所述概率值选取与所述实时人像图像匹配的第一预设微表情。

在其中一个实施例中，方法还包括：

计算采集的两张连续的所述实时人像图像对应的情绪得分的情绪差值；

获取预设情绪变化阈值，将所述情绪差值与所述预设情绪变化阈值进行比较；

当所述情绪差值超过所述预设情绪变化阈值时，生成情绪预警提示。

在其中一个实施例中，所述根据所述预存人脸图像对所述实时人像图像进行人脸检测之后，还包括：

当检测出存在与所述实时人像图像匹配的所述预存人脸图像时，查找所述匹配的预存人脸图像对应的身份信息；

将查找到的所述身份信息输出。

在其中一个实施例中，所述根据所述预存人脸图像对所述实时人像图像进行人脸检测之后，还包括：