[发明专利]基于数字人的工作状态确定方法、装置和存储介质在审
申请号: | 202010847552.1 | 申请日: | 2020-08-21 |
公开(公告)号: | CN112183197A | 公开(公告)日: | 2021-01-05 |
发明(设计)人: | 常向月 | 申请(专利权)人: | 深圳追一科技有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62 |
代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 陈小娜 |
地址: | 518051 广东省深圳市南山区粤海街道*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 数字 工作 状态 确定 方法 装置 存储 介质 | ||
1.一种基于数字人的工作状态确定方法,其特征在于,所述方法包括:
获取目标用户的目标语音以及发出所述目标语音时所对应的目标图像;
基于所述目标图像对应的人脸特征进行工作状态分析,得到所述目标用户对应的第一工作状态;
基于所述目标语音对应的语音特征进行工作状态分析,得到所述目标用户对应的第二工作状态;
结合所述第一工作状态以及所述第二工作状态确定所述目标用户对应的目标工作状态。
2.根据权利要求1所述的方法,其特征在于,所述基于所述目标图像对应的人脸特征进行工作状态分析,得到所述目标用户对应的第一工作状态包括:
获取所述目标图像对应的人脸特征,利用已训练的表情识别模型对所述人脸特征进行处理,得到所述目标用户对应的目标表情;
根据所述目标表情进行工作状态分析,得到所述目标用户对应的第一工作状态。
3.根据权利要求1所述的方法,其特征在于,所述目标图像为多个,所述基于所述目标图像对应的人脸特征进行工作状态分析,得到所述目标用户对应的第一工作状态包括:
获取所述目标图像对应的多个眼睛关键特征点分别对应的特征点位置,基于所述特征点位置之间的位置差异,得到所述目标图像中,所述目标用户的眼睛对应的目标闭合状态;
根据多个所述目标图像对应的采集顺序,对所述目标闭合状态进行排序,得到闭合状态序列;
根据所述闭合状态序列进行工作状态分析,得到所述目标用户对应的第一工作状态。
4.根据权利要求1所述的方法,其特征在于,所述基于所述目标语音对应的语音特征进行工作状态分析,得到所述目标用户对应的第二工作状态包括:
获取所述目标语音对应的语音属性信息,所述语音属性信息包括语速信息或者语调变化信息的至少一种;
基于所述语音属性信息进行工作状态分析,得到所述目标用户对应的第二工作状态。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
对所述目标语音进行语义情绪分析,得到所述目标语音对应的目标语义情绪;
所述基于所述语音属性信息进行工作状态分析,得到所述目标用户对应的第二工作状态包括:
基于所述语音属性信息以及所述目标语义情绪进行工作状态分析,得到所述目标用户对应的第二工作状态。
6.根据权利要求1所述的方法,其特征在于,所述第一工作状态为多个分析维度分别对应的工作状态,所述第二工作状态为多个分析维度分别对应的工作状态,所述结合所述第一工作状态以及所述第二工作状态确定所述目标用户对应的目标工作状态包括:
计算所述第一工作状态以及所述第二工作状态中,工作状态为疲惫的状态数量;
当所述状态数量大于预设阈值或者所述状态数量对应的比例大于预设比例时,确定所述目标用户对应的目标工作状态为疲惫。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取所述目标用户对应的虚拟用户形象;
根据所述目标工作状态控制所述虚拟用户形象发出工作状态提示信息。
8.根据权利要求7所述的方法,其特征在于,所述根据所述目标工作状态控制所述虚拟用户形象发出工作状态提示信息包括:
获取所述第一工作状态对应的人脸调整参数;
根据所述人脸调整参数对所述虚拟用户形象进行形象调整,根据所述目标工作状态控制形象调整后的虚拟用户形象发出工作状态提示信息。
9.根据权利要求1所述的方法,其特征在于,所述结合所述第一工作状态以及所述第二工作状态确定所述目标用户对应的目标工作状态包括:
将所述第一工作状态以及所述第二工作状态输入到综合状态确定模型中,得到所述目标用户对应的目标工作状态。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳追一科技有限公司,未经深圳追一科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010847552.1/1.html,转载请声明来源钻瓜专利网。