[发明专利]虚拟机器人的交互方法、装置、电子设备及存储介质在审
申请号: | 201911007922.4 | 申请日: | 2019-10-22 |
公开(公告)号: | CN110794964A | 公开(公告)日: | 2020-02-14 |
发明(设计)人: | 刘炫鹏 | 申请(专利权)人: | 深圳追一科技有限公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01 |
代理公司: | 44351 深圳市智圈知识产权代理事务所(普通合伙) | 代理人: | 苗燕 |
地址: | 518057 广东省深圳市南山区粤海街道*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 虚拟机器人 姿态调整 参数序列 目标用户 头部姿态 交互视频 空间位置 图像序列 音频数据 存储介质 电子设备 动态调整 面向用户 人机交互 生成图像 实时获取 头部位置 姿态图像 自然度 会话 多帧 申请 输出 进程 | ||
1.一种虚拟机器人的交互方法,其特征在于,所述方法包括:
实时获取当前会话进程对应的目标用户的音频数据,所述会话进程中所述虚拟机器人与所述目标用户一对一交互;
根据所述音频数据,确定所述目标用户的头部的空间位置;
根据所述空间位置,获取所述虚拟机器人的头部的姿态调整参数序列,所述姿态调整参数序列包括多个姿态调整参数;
基于所述姿态调整参数序列,逐步调整所述虚拟机器人的头部姿态,直至所述虚拟机器人的头部朝向所述目标用户,并生成图像序列,所述图像序列由多帧连续的所述虚拟机器人的姿态图像构成;
根据所述图像序列,生成并输出包含所述虚拟机器人的头部姿态变化的交互视频。
2.根据权利要求1所述的方法,其特征在于,所述音频数据由两个麦克风采集到,所述根据所述音频数据,确定所述目标用户的头部的空间位置,包括:
根据所述两个麦克风采集到的同一音频数据的音频特征差异,确定所述音频数据对应的音源的平面坐标;
将所述平面坐标转换为空间坐标系中的三维坐标,并将所述三维坐标作为所述目标用户的头部的空间位置,其中,所述空间坐标系以所述虚拟机器人的头部的空间位置为原点。
3.根据权利要求1所述的方法,其特征在于,所述音频数据由麦克风阵列采集到,所述麦克风阵列至少由3个麦克风组成,所述根据所述音频数据,确定所述目标用户的头部的空间位置,包括:
根据所述麦克风阵列中每个麦克风采集的同一音频数据的音频特征差异,确定所述音频数据的音源在空间坐标系中的三维坐标,并将所述三维坐标作为所述目标用户的头部的空间位置,所述空间坐标系以所述虚拟机器人的头部的空间位置为原点。
4.根据权利要求1所述的方法,其特征在于,在所述实时获取当前会话进程对应的目标用户的音频数据之前,所述方法还包括:
当获取到第一用户的音频数据时,提取所述第一用户的音频数据对应的第一声纹特征;
建立与所述第一用户对应的第一会话进程,并将所述第一会话进程与所述第一声纹特征绑定;
所述实时获取当前会话进程对应的目标用户的音频数据,包括:
当所述当前会话进程为所述第一会话进程时,将所述第一会话进程对应的第一用户作为所述当前会话进程对应的目标用户,并根据所述第一声纹特征,实时获取所述目标用户的音频数据。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
当所述当前会话进程为所述第一会话进程时,如果获取到第二用户的音频数据,则提取所述第二用户的音频数据对应的第二声纹特征;
建立与所述第二用户对应的第二会话进程,并将所述第二会话进程与所述第二声纹特征绑定;
当所述第一会话进程结束或者所述第一会话进程处于等待超时状态时,将所述当前会话进程切换为所述第二会话进程;
所述实时获取当前会话进程对应的目标用户的音频数据,包括:
将所述第二会话进程对应的第二用户作为所述当前会话进程对应的目标用户,并根据所述第二声纹特征,实时获取所述目标用户的音频数据。
6.根据权利要求5所述的方法,其特征在于,所述第一会话进程处于等待超时状态,包括:
当未获取到所述第一用户的音频数据时,进行等待时间的计时;
当所述计时的数值未达到设定时长,且所述计时期间未采集到所述第一用户的音频数据时,确定所述第一会话进程处于等待超时状态。
7.根据权利要求1所述的方法,其特征在于,所述根据所述空间位置,获取所述虚拟机器人的头部的姿态调整参数序列,包括:
根据所述空间位置,获取所述虚拟机器人朝向所述目标用户时所述虚拟机器人的头部的目标姿态参数;
获取所述虚拟机器人的头部的当前姿态参数;
基于所述当前姿态参数以及所述目标姿态参数,确定所述虚拟机器人的头部的姿态调整参数序列。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳追一科技有限公司,未经深圳追一科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911007922.4/1.html,转载请声明来源钻瓜专利网。