[发明专利]人机交互方法、装置、存储介质及电子设备有效
申请号: | 201910532868.9 | 申请日: | 2019-06-19 |
公开(公告)号: | CN110347246B | 公开(公告)日: | 2023-07-18 |
发明(设计)人: | 陈泽洲;刘兆祥;廉士国 | 申请(专利权)人: | 达闼机器人股份有限公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01;G06V40/16;G06V40/20 |
代理公司: | 北京英创嘉友知识产权代理事务所(普通合伙) 11447 | 代理人: | 张岩龙 |
地址: | 201111 上*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本公开涉及一种人机交互方法、装置、存储介质及电子设备,所述方法包括:获取摄像头在第一时刻拍摄的第一人体图像;将存储的N张第二人体图像对应的人体特征和第一人体图像输入至动作模型网络,获得动作模型网络输出的动作数据,其中,N为正整数,N张第二人体图像为摄像头分别在第一时刻的前N个时刻拍摄的人体图像,前N个时刻与第一时刻为连续的;动作模型网络包括人脸特征提取模型、肢体特征提取模型、特征序列生成模型以及动作识别模型,特征序列生成模型的输入分别与人脸特征提取模型的输出及肢体特征提取模型的输出耦合,动作识别模型的输入与特征序列生成模型的输出耦合;在机器人上展现动作数据。由此可以有效提高人机交互的多样性。 | ||
搜索关键词: | 人机交互 方法 装置 存储 介质 电子设备 | ||
【主权项】:
1.一种人机交互方法,其特征在于,所述方法包括:获取摄像头在第一时刻拍摄的第一人体图像;将存储的N张第二人体图像对应的人体特征和所述第一人体图像输入至动作模型网络,获得所述动作模型网络输出的动作数据,其中,N为正整数,所述N张第二人体图像为所述摄像头分别在所述第一时刻的前N个时刻拍摄的人体图像,所述前N个时刻与所述第一时刻为连续的;所述人体特征包括人脸特征和肢体特征;以及,所述动作模型网络包括人脸特征提取模型、肢体特征提取模型、特征序列生成模型以及动作识别模型,所述特征序列生成模型的输入分别与所述人脸特征提取模型的输出及肢体特征提取模型的输出耦合,所述动作识别模型的输入与所述特征序列生成模型的输出耦合;所述人脸特征提取模型用于提取所述第一人体图像对应的人脸特征;所述肢体特征提取模型用于提取所述第一人体图像对应的肢体特征;所述特征序列生成模型用于根据所述第一人体图像对应的所述人脸特征、所述肢体特征以及所述N张第二人体图像对应的人体特征,生成人体特征序列;所述动作识别模型用于根据所述人体特征序列,识别出所述动作数据;在机器人上展现所述动作数据。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于达闼机器人股份有限公司,未经达闼机器人股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910532868.9/,转载请声明来源钻瓜专利网。