[发明专利]基于虚拟人行为标准的交互方法及系统

说明书

本发明提供一种基于虚拟人行为标准的交互方法，虚拟人通过智能设备展示，在处于交互状态时启动语音、情感、视觉以及感知能力，包含：获取多模态交互数据，对多模态交互数据进行解析，得到用户的交互意图；根据交互意图生成多模态回应数据以及与多模态回应数据匹配的虚拟人技能数据，其中，虚拟人技能数据通过虚拟人的面部表情以及肢体动作展现虚拟人的技能；配合虚拟人技能数据输出多模态回应数据。本发明提供了一种虚拟人，能够与用户进行多模态的交互。并且，还能够在输出多模态回应数据时配合输出虚拟人技能数据，展示虚拟人的技能，对用户进行技能的教学和指导，使得用户与虚拟人之间能够进行流畅的交流，并使得用户享受拟人的交互体验。

技术领域

本发明涉及人工智能领域，具体地说，涉及一种基于虚拟人行为标准的交互方法及系统。

背景技术

机器人多模态交互系统的开发致力于模仿人类对话，以试图在上下文之间模仿人类之间的交互。但是，目前来说，对于虚拟人相关的机器人多模态交互系统的开发还不太完善，尚未出现进行多模态交互的虚拟人，更为重要的是，尚无基于虚拟人自身行为标准进行交互的交互产品。

因此，本发明提供了一种基于虚拟人行为标准的交互方法及系统。

发明内容

为解决上述问题，本发明提供了一种基于虚拟人行为标准的交互方法，所述虚拟人通过智能设备展示，在处于交互状态时启动语音、情感、视觉以及感知能力，所述方法包含以下步骤：

获取多模态交互数据，对所述多模态交互数据进行解析，得到用户的交互意图；

根据所述交互意图生成多模态回应数据以及与所述多模态回应数据匹配的虚拟人技能数据，其中，所述虚拟人技能数据通过虚拟人的面部表情以及肢体动作展现虚拟人的技能；

配合所述虚拟人技能数据输出所述多模态回应数据。

根据本发明的一个实施例，根据所述交互意图生成多模态回应数据以及与所述多模态回应数据匹配的虚拟人技能数据的步骤中，还包含以下步骤：

根据所述交互意图以及交互的上下文环境确定当前虚拟人的技能参数；

依据所述技能参数生成与所述多模态回应数据匹配的所述虚拟人技能数据。

根据本发明的一个实施例，所述技能参数包含展示参数、讲解参数以及教学参数。

根据本发明的一个实施例，依据所述技能参数生成与所述多模态回应数据匹配的所述虚拟人技能数据的步骤中，包含以下步骤：

生成与所述技能参数匹配的虚拟人面部表情数据以及虚拟人肢体动作数据，其中，所述虚拟人面部表情数据以及所述虚拟人肢体动作数据属于所述虚拟人技能数据。

根据本发明的一个实施例，所述肢体动作数据包含头部动作数据、手部动作数据、四肢动作数据以及躯干动作数据中的任一项或任几项的组合。

根据本发明的一个实施例，当所述技能为舞蹈技能，配合所述虚拟人技能数据输出所述多模态回应数据的步骤中，包含以下步骤：

当所述技能参数为展示参数时，输出表情以及嘴部动作表达舞蹈动作中包含的情感；

当所述技能参数为讲解参数时，在输出语言的同时配合肢体动作表达舞蹈动作，其中，肢体动作包含胯部动作、腿部动作以及手部动作；

当所述技能参数为教学参数时，输出转身动作以及行走动作配合舞蹈动作的表达。

根据本发明的一个实施例，在交互过程中，通过语言、表情或肢体动作表达对用户的认可以及鼓励。

根据本发明的另一个方面，还提供了一种基于虚拟人行为标准的交互装置，所述装置包含：