[发明专利]人机交互方法、装置、存储介质及电子设备有效
申请号: | 201910532871.0 | 申请日: | 2019-06-19 |
公开(公告)号: | CN110347247B | 公开(公告)日: | 2023-07-18 |
发明(设计)人: | 陈泽洲;刘兆祥 | 申请(专利权)人: | 达闼机器人股份有限公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01;G06V40/16;G06V40/10 |
代理公司: | 北京英创嘉友知识产权代理事务所(普通合伙) 11447 | 代理人: | 张岩龙 |
地址: | 201111 上*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本公开涉及一种人机交互方法、装置、存储介质及电子设备,所述方法包括:获取摄像头在第一时刻拍摄的第一手势图像;将存储的N张第二手势图像对应的手势特征和所述第一手势图像输入至表情模型网络,获得所述表情模型网络输出的表情数据,所述手势特征提取模型用于提取所述第一手势图像对应的手势特征;所述手势特征序列生成模型用于根据所述第一手势图像对应的所述手势特征、以及N张第二手势图像对应的手势特征,生成手势特征序列;所述表情识别模型用于根据所述手势特征序列,识别出所述表情数据;在机器人上展现所述表情数据。一方面可以为后续的表情识别提供准确的数据支持。另一方面,可以使得本公开提供的人机交互方法的使用范围更广。 | ||
搜索关键词: | 人机交互 方法 装置 存储 介质 电子设备 | ||
【主权项】:
1.一种人机交互方法,其特征在于,所述方法包括:获取摄像头在第一时刻拍摄的第一手势图像;将存储的N张第二手势图像对应的手势特征和所述第一手势图像输入至表情模型网络,获得所述表情模型网络输出的表情数据,其中,N为正整数,所述N张第二手势图像为所述摄像头分别在所述第一时刻的前N个时刻拍摄的手势图像,所述前N个时刻与所述第一时刻为连续的;以及,所述表情模型网络包括手势特征提取模型、手势特征序列生成模型以及表情识别模型,所述手势特征序列生成模型的输入与所述手势特征提取模型的输出耦合,所述表情识别模型的输入与所述手势特征序列生成模型的输出耦合;所述手势特征提取模型用于提取所述第一手势图像对应的手势特征;所述手势特征序列生成模型用于根据所述第一手势图像对应的所述手势特征、以及所述N张第二手势图像对应的手势特征,生成手势特征序列;所述表情识别模型用于根据所述手势特征序列,识别出所述表情数据;在机器人上展现所述表情数据。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于达闼机器人股份有限公司,未经达闼机器人股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910532871.0/,转载请声明来源钻瓜专利网。