[发明专利]基于多模态情绪与脸部属性识别的人机交互方法、系统在审
申请号: | 201810130305.2 | 申请日: | 2018-02-08 |
公开(公告)号: | CN108255307A | 公开(公告)日: | 2018-07-06 |
发明(设计)人: | 简仁贤;许世焕;卞雅雯;杨闵淳 | 申请(专利权)人: | 竹间智能科技(上海)有限公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01 |
代理公司: | 北京酷爱智慧知识产权代理有限公司 11514 | 代理人: | 安娜 |
地址: | 200120 上海市浦东新区自由贸*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明属于人机交互技术领域,提供了一种基于多模态情绪与脸部属性识别的人机交互方法、系统。该方法包括获取用户的人脸图像和声音信息,将声音信息转换为文字信息,根据人脸图像、声音信息和文字信息,对情绪进行判别,确定情绪向量,根据人脸图像,确定人脸属性特征,根据回话策略,分析情绪向量、人脸属性特征和文字信息,输出回馈文字。本发明基于多模态情绪与脸部属性识别的人机交互方法、系统,能够全面识别人脸属性,提高多模态人脸情绪识别的准确性,将多模态情绪、脸部属性与自然语言交互信息相结合,提供更加自然与智能的人机交互体验。 | ||
搜索关键词: | 多模态 人机交互 情绪 人脸 人脸图像 声音信息 属性识别 文字信息 属性特征 向量 自然语言 人机交互技术 交互信息 情绪识别 输出回馈 智能 转换 分析 | ||
【主权项】:
1.一种基于多模态情绪与脸部属性识别的人机交互方法,其特征在于,包括:获取用户的人脸图像和声音信息;将所述声音信息转换为文字信息;根据所述人脸图像、所述声音信息和所述文字信息,对情绪进行判别,确定情绪向量;根据所述人脸图像,确定人脸属性特征;根据回话策略,分析所述情绪向量、所述人脸属性特征和所述文字信息,输出回馈文字。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于竹间智能科技(上海)有限公司,未经竹间智能科技(上海)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810130305.2/,转载请声明来源钻瓜专利网。
- 上一篇:加速度识别装置
- 下一篇:一种基于虚拟人的手势交互方法及系统