[发明专利]虚拟机器人的交互方法、装置、电子设备及存储介质有效
申请号: | 201911006857.3 | 申请日: | 2019-10-22 |
公开(公告)号: | CN110555507B | 公开(公告)日: | 2021-03-23 |
发明(设计)人: | 刘炫鹏 | 申请(专利权)人: | 深圳追一科技有限公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01 |
代理公司: | 深圳市智圈知识产权代理事务所(普通合伙) 44351 | 代理人: | 苗燕 |
地址: | 518057 广东省深圳市南山区粤海街道*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 虚拟 机器人 交互 方法 装置 电子设备 存储 介质 | ||
1.一种虚拟机器人的交互方法,其特征在于,所述方法包括:
当获取到第一用户的人脸图像时,提取所述第一用户的人脸图像对应的第一人脸特征;
建立与所述第一用户对应的第一会话进程,并将所述第一会话进程与所述第一人脸特征绑定;
当当前会话进程为所述第一会话进程时,如果获取到第二用户的人脸图像,则提取所述第二用户的人脸图像对应的第二人脸特征;
建立与所述第二用户对应的第二会话进程,并将所述第二会话进程与所述第二人脸特征绑定;
当所述第一会话进程结束或者所述第一会话进程处于等待超时状态时,将所述当前会话进程切换为所述第二会话进程;
当所述当前会话进程为所述第一会话进程时,将所述第一会话进程对应的第一用户作为所述当前会话进程对应的目标用户,并根据所述第一人脸特征,实时获取所述目标用户的人脸图像;当所述当前会话进程为所述第二会话进程时,将所述第二会话进程对应的第二用户作为所述当前会话进程对应的目标用户,并根据所述第二人脸特征,实时获取所述目标用户的人脸图像;所述会话进程中所述虚拟机器人与所述目标用户一对一交互;
根据所述人脸图像,确定所述目标用户的头部的空间位置;
根据所述空间位置,获取所述虚拟机器人的头部的姿态调整参数序列,所述姿态调整参数序列包括多个姿态调整参数;
基于所述姿态调整参数序列,逐步调整所述虚拟机器人的头部姿态,直至所述虚拟机器人的头部朝向所述目标用户,并生成图像序列,所述图像序列由多帧连续的所述虚拟机器人的姿态图像构成;
根据所述图像序列,生成并输出包含所述虚拟机器人的头部姿态变化的交互视频。
2.根据权利要求1所述的方法,其特征在于,所述第一会话进程处于等待超时状态,包括:
当未获取到所述第一用户的人脸图像时,进行等待时间的计时;
当所述计时的数值未达到设定时长,且未采集到所述第一用户的语音数据时,确定所述第一会话进程处于等待超时状态。
3.根据权利要求1所述的方法,其特征在于,所述根据所述空间位置,获取所述虚拟机器人的头部的姿态调整参数序列,包括:
根据所述空间位置,获取所述虚拟机器人的头部朝向所述目标用户时所述虚拟机器人的头部的目标姿态参数;
获取所述虚拟机器人的头部的当前姿态参数;
基于所述当前姿态参数以及所述目标姿态参数,确定所述虚拟机器人的头部的姿态调整参数序列。
4.根据权利要求3所述的方法,其特征在于,在所述根据所述图像序列,生成并输出包含所述虚拟机器人的头部姿态变化的交互视频之后,所述方法还包括:
在所述交互视频的播放过程中,如果检测到所述目标用户的头部的空间位置发生变化,则根据变化后的空间位置,获取所述虚拟机器人的头部朝向所述目标用户时所述虚拟机器人的头部的目标更新姿态参数;
当所述目标更新姿态参数与所述目标姿态参数之间的差值大于预设值时,基于所述虚拟机器人的头部的当前姿态参数以及所述目标更新姿态参数,确定所述虚拟机器人的头部的新的姿态调整参数序列;
基于所述新的姿态调整参数序列,逐步调整所述虚拟机器人的头部姿态,直至所述虚拟机器人的头部朝向所述目标用户,并生成新的图像序列;
根据所述新的图像序列,生成并输出包含所述虚拟机器人的头部姿态变化的交互更新视频,所述交互更新视频用于替换所述交互视频进行播放。
5.根据权利要求1所述的方法,其特征在于,所述人脸图像由单个摄像头采集到,所述根据所述人脸图像,确定所述目标用户的头部的空间位置,包括:
根据所述人脸图像,获取所述目标用户的人脸的平面坐标;
将所述平面坐标转换为空间坐标系中的三维坐标,并将所述三维坐标作为所述目标用户的头部的空间位置,其中,所述空间坐标系以所述虚拟机器人的头部的空间位置为原点。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳追一科技有限公司,未经深圳追一科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911006857.3/1.html,转载请声明来源钻瓜专利网。