[发明专利]基于表情识别的情绪聊天机器人在审
申请号: | 201910599820.X | 申请日: | 2019-07-01 |
公开(公告)号: | CN110370275A | 公开(公告)日: | 2019-10-25 |
发明(设计)人: | 夏博洋;朱元庚;付降寅;苏子扬;王淼威;陈维;陈潇潇;唐都;古雪;王诗尊;孙逸林 | 申请(专利权)人: | 夏博洋 |
主分类号: | B25J9/16 | 分类号: | B25J9/16;B25J11/00;B25J19/04;G06K9/00;G06K9/62;G06N3/04 |
代理公司: | 深圳众邦专利代理有限公司 44545 | 代理人: | 王红 |
地址: | 100000 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 表情识别 聊天机器人 情绪识别 语音对话 人机交互模块 情绪 病人心理 聊天 陪护 卧床 自然语言理解模块 卷积神经网络 语音识别模块 特征点提取 控制播放 模拟人类 人本发明 信号路由 学习模块 游戏场景 耦合匹配 交互性 真实性 迁移 场景 | ||
1.一种基于表情识别的情绪聊天机器人,其特征在于,包括:卧床病人心理陪护系统;所述卧床病人心理陪护系统分别包括情绪识别模块、语音对话模块和人机交互模块;
所述情绪识别模块、语音对话模块和人机交互模块均包括信号路由模块;
所述情绪识别模块还包括卷积神经网络迁移学习模块、特征点提取模块和SVM分类模块;
所述语音对话模块还包括语音识别模块、自然语言理解模块和耦合匹配模块;
所述人机交互模块还包括Key帧动画模块和脚本时序控制模块;
当所述基于表情识别的情绪聊天机器人处于训练模式时;由图像输入、人脸识别、图像预处理、特征提取Gabor.SIF、模式回归以及识别成果依次连接;
当所述基于表情识别的情绪聊天机器人处于测试模式时;由实时视频流、特征提取、模式回归以及识别成果依次连接。
2.根据权利要求1所述的基于表情识别的情绪聊天机器人,其特征在于,所述情绪识别模块分为语音识别子模块、NLP聊天机器人子模块和语音合成子模块。
3.根据权利要求2所述的基于表情识别的情绪聊天机器人,其特征在于,所述图像输入来源为视频以及表情数据集Fer2013。
4.根据权利要求1所述的基于表情识别的情绪聊天机器人,其特征在于,所述人脸检测采用人脸检测算法检测出人脸区域。
5.根据权利要求1所述的基于表情识别的情绪聊天机器人,其特征在于,所述情绪识别模块采用流式录音协议实现,流式录音协议为双线程录音模式。
6.根据权利要求1所述的基于表情识别的情绪聊天机器人,其特征在于,所述语音对话模块中的语音输出模块根据耦合意图匹配结果进行语音合成,同时Unity3D动画接收语音信号或表情识别信号做出相应表情。
7.根据权利要求1所述的基于表情识别的情绪聊天机器人,其特征在于,所述基于表情识别的情绪聊天机器人平台架构为Web服务器使用Node.js快速搭建,简单前端使用React.js前端框架,数据库使用MongoDb,配合使用Redux搭建可用后端,完成服务器配置。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于夏博洋,未经夏博洋许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910599820.X/1.html,转载请声明来源钻瓜专利网。