[发明专利]一种基于虚拟人的手势交互方法及系统

权利要求书

1.一种基于虚拟人的手势交互方法，其特征在于，所述虚拟人在智能设备运行，且所述虚拟人具备预设形象特征和预设属性，在处于交互状态时启动语音、情感、视觉和感知能力，所述方法包括：

通过所述虚拟人输出多模态数据；

获取用户的多模态交互数据；

解析所述多模态交互数据，其中，所述多模态交互数据包括通过视觉能力检测并提取的招手手势的图像；

当所述招手手势满足预设条件时，确定该手势指示空间移动的意图；

所述虚拟人响应所述空间移动的意图并进行移动。

2.根据权利要求1所述的方法，其特征在于，所述预设条件包括所述招手手势与预设招手手势特征相匹配以及所述招手手势的持续时长大于等于第一阈值。

3.根据权利要求1所述的方法，其特征在于，所述虚拟人响应所述空间移动的意图并进行移动包括：

所述虚拟人响应所述空间移动的意图并进行移动，同时进行询问。

4.根据权利要求2所述的方法，其特征在于，所述招手手势特征包括：

实时采集的手部轮廓、各手指轮廓和手指节点；

根据所述手部轮廓、所述手指轮廓和所述手指节点确定所述招手手势，其中，所述手指节点包括手指关节关键点和手指指尖。

5.根据权利要求4所述的方法，其特征在于，所述招手手势指示：

手心向上，食指、中指、无名指、小拇指形成预设空间位置关系，且所述食指、中指、无名指、小拇指同步进行一次或几次摆动；或者

手心向上，大拇指、中指、无名指、小拇指蜷缩至手掌，食指进行朝向手心的一次或几次摆动；或者

手心向下，食指、中指、无名指、小拇指形成预设空间位置关系，且所述食指、中指、无名指、小拇指同步进行一次或几次摆动。

6.根据权利要求1所述的方法，其特征在于，所述虚拟人响应所述空间移动的意图并进行移动之后，还包括：

匹配所述虚拟人的肢体、情感和/或表情输出。

7.一种基于虚拟人的手势交互系统，其特征在于，包括智能设备和云端服务器，所述虚拟人在智能设备运行，且所述虚拟人具备预设形象特征和预设属性，在处于交互状态时启动语音、情感、视觉和感知能力，其中：

所述智能设备用于，

通过所述虚拟人输出多模态数据；

获取用户的多模态交互数据；

所述云端服务器用于，

解析所述多模态交互数据，其中，所述多模态交互数据包括通过视觉能力检测并提取的招手手势的图像；

当所述招手手势满足预设条件时，确定该手势指示空间移动的意图；

所述智能设备还配置为呈现所述虚拟人响应所述空间移动的意图并进行移动。

8.一种虚拟人，其特征在于，所述虚拟人在智能设备运行，所述虚拟人执行权利要求1-6任意一项所述方法的步骤。

9.一种智能设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现以下步骤：

通过所述虚拟人输出多模态数据；

获取用户的多模态交互数据；

解析所述多模态交互数据，其中，所述多模态交互数据包括通过视觉能力检测并提取的招手手势的图像；

当所述招手手势满足预设条件时，确定该手势指示空间移动的意图；

该智能设备中所运行的所述虚拟人响应所述空间移动的意图并进行移动。

10.一种计算机可读存储介质，其存储有计算机程序，其特征在于，该程序被处理器执行时实现权利要求1-6任意一项所述方法的步骤。