[发明专利]一种基于虚拟人的交互方法及系统

权利要求书

1.一种基于虚拟人的交互方法，其特征在于，所述虚拟人在智能设备运行，且所述虚拟人具备预设形象特征和预设属性，在处于交互状态时启动语音、情感、视觉和感知能力，所述方法包括：

采集用户多模态数据并解析，获取包含用户表情意图的用户交互意图，其中：

从所述用户多模态数据中提取用户表情数据；

对所述用户表情数据进行解析，生成对应的用户表情意图；

针对所述用户交互意图，生成对应的多模态交互回应数据，所述多模态交互回应数据包含表情回应数据，其中，获取所述虚拟人与所述用户的熟悉度参量，判断熟悉度参量是否超过预设阈值，当所述熟悉度参量超过设定阈值时生成与所述用户表情意图同步的表情回应数据，如果没超过，则之后的交互过程中不需要一定保持虚拟人与用户表情意图的同步；

基于所述虚拟人输出所述多模态交互回应数据，其中，利用所述虚拟人展示所述表情回应数据对应的表情，其中：

根据所述表情回应数据确定所述虚拟人的基础情绪表现，其中，每一类基础情绪表现包含一个专属调用标识符，在需要调用时通过调用标识符进行区分；

根据所述虚拟人的基础情绪表现输出与所述基础情绪表现匹配的所述虚拟人眼部变化以及所述虚拟人皮肤肌理反应的展示数据，其中，任一基础情绪表现还具备与之对应的虚拟人眼部变化集以及皮肤肌理反应集，任一对应的虚拟人眼部变化集以及皮肤肌理反应集还具备与之对应的虚拟人泪腺作用组。

2.根据权利要求1所述的方法，其特征在于，所述用户表情数据包括用户面部表情数据和/或用户姿态数据。

3.根据权利要求2所述的方法，其特征在于，调用视觉能力提取所述用户面部表情数据。

4.根据权利要求1所述的方法，其特征在于，对所述用户表情数据进行解析，生成对应的用户表情意图，包括：

确认用户情绪和/或用户态度。

5.根据权利要求1所述的方法，其特征在于，利用所述虚拟人与所述用户的交互次数描述所述熟悉度参量。

6.一种存储介质，其特征在于，所述存储介质上存储有可实现如权利要求1-5中任一项所述方法的程序代码。

7.一种基于虚拟人的交互系统，其特征在于，所述系统包括：

输入获取模块，其配置为采集用户多模态数据；

交互解析模块，其配置为解析所述用户多模态数据，获取包含用户表情意图的用户交互意图，包括：

表情提取单元，其配置为从所述用户多模态数据中提取用户表情数据；

表情解析单元，其配置为对所述用户表情数据进行解析，生成对应的用户表情意图；

交互回应生成模块，其配置为针对所述用户交互意图，生成对应的多模态交互回应数据，所述多模态交互回应数据包含表情回应数据，所述表情回应数据被所述虚拟人展示为对应的表情；

所述交互回应生成模块配置为：

获取所述虚拟人与所述用户的熟悉度参量，判断熟悉度参量是否超过预设阈值，当所述熟悉度参量超过设定阈值时生成与所述用户表情意图同步的表情回应数据，如果没超过，则之后的交互过程中不需要一定保持虚拟人与用户表情意图的同步；

基于所述虚拟人输出所述多模态交互回应数据，其中，利用所述虚拟人展示所述表情回应数据对应的表情，其中：

根据所述表情回应数据确定所述虚拟人的基础情绪表现，其中，每一类基础情绪表现包含一个专属调用标识符，在需要调用时通过调用标识符进行区分；

根据所述虚拟人的基础情绪表现输出与所述基础情绪表现匹配的所述虚拟人眼部变化以及所述虚拟人皮肤肌理反应的展示数据，其中，任一基础情绪表现还具备与之对应的虚拟人眼部变化集以及皮肤肌理反应集，任一对应的虚拟人眼部变化集以及皮肤肌理反应集还具备与之对应的虚拟人泪腺作用组。

8.一种虚拟人系统，其特征在于，所述系统包括智能设备以及云端服务器，其中：

所述云端服务器包含如权利要求7所述的交互系统以及多个能力接口，所述交互系统配置为调用所述能力接口获取所述用户多模态数据并解析，生成并输出所述多模态交互回应数据，其中，所述能力接口包括语义理解接口、视觉识别接口、情感计算接口、认知计算接口；

所述智能设备包括：

用户界面，其配置为基于虚拟人执行参数在预设显示区域内显示被唤醒的虚拟人并令所述虚拟人展示与所述表情回应数据对应的表情；

人机交互输入输出模块，其配置为获取所述用户多模态数据以及输出所述虚拟人执行参数；

通信模块，其配置为输出所述用户多模态数据并接收所述多模态交互回应数据；

中央处理单元，其配置为利用所述多模态交互回应数据计算与所述多模态交互回应数据相对应的虚拟人执行参数。