[发明专利]基于AR模型的交互方法、装置、设备和存储介质

权利要求书

1.一种基于AR模型的交互方法，其特征在于，所述方法应用于终端设备，所述方法，包括：

获取视频流，并识别所述视频流中的对象的关键点和关键点运动信息；

根据所述关键点与AR模型的动作点之间的对应关系，确定与所述关键点对应的动作点；

根据所述关键点运动信息，控制所述AR模型的动作点进行动作，以控制所述AR模型进行动作。

2.根据权利要求1所述的方法，其特征在于，根据所述关键点运动信息，控制所述AR模型的动作点进行动作，包括：

根据各所述关键点，确定不同的关键点之间的连动关系；

根据所述连动关系和各所述关键点的关键点运动信息，控制与各所述关键点对应的各动作点进行动作。

3.根据权利要求2所述的方法，其特征在于，根据各所述关键点，确定不同的关键点之间的连动关系，包括：

根据预设的数据库，其中，所述数据库中包括多个连动关系，所述多个连动关系中的每一个连动关系为至少两个关键点之间的关系，查询各所述关键点所对应的连动关系。

4.根据权利要求2所述的方法，其特征在于，每一所述关键点为手指上的一预设点；

每一所述连动关系为同一手指上的各预设点之间连动关系，或者，每一所述连动关系为不同手指之间的连动关系。

5.根据权利要求2所述的方法，其特征在于，每一所述关键点为面部器官上的一预设点；

每一所述连动关系为同一面部器官上的各预设点之间连动关系，或者，每一所述连动关系为不同面部器官之间的连动关系。

6.根据权利要求1所述的方法，其特征在于，根据所述关键点运动信息，控制所述AR模型的动作点进行动作，包括：

根据所述关键点运动信息，确定各所述关键点之间的连动关系；

根据所述连动关系，控制与各所述关键点对应的各动作点进行动作。

7.根据权利要求1所述的方法，其特征在于，所述关键点运动信息为以下的任意一种或多种：关键点在三维空间中的坐标位置、关键点在三维空间中的朝向、关键点的运动速度。

8.根据权利要求1所述的方法，其特征在于，根据所述关键点运动信息，控制所述AR模型的动作点进行动作，包括：

根据所述关键点和所述关键点运动信息，确定所述对象的对象动作；

根据预设的对象动作与AR模型动作之间的对应关系，确定与所述对象动作对应的AR模型动作；

根据与所述对象动作对应的AR模型动作，控制所述AR模型的动作点进行动作。

9.根据权利要求1-8任一项所述的方法，其特征在于，所述获取视频流，包括：

通过所述终端设备上的图像摄像头，采集所述视频流；

或者，通过所述终端设备上的红外摄像头，采集所述对象的热力图，根据所述热力图生成所述视频流。

10.根据权利要求1-8任一项所述的方法，其特征在于，在根据所述关键点运动信息，控制所述AR模型的动作点进行动作，以控制所述AR模型进行动作之后，还包括：

根据预设的动作点与语音提示信息之间的对应关系，确定并显示与所述AR模型的动作点对应的语音提示信息，其中，所述语音提示信息用于表征所述AR模型的动作点正在进行动作。

11.一种终端设备，其特征在于，所述终端设备，包括：

获取单元，用于获取视频流；

识别单元，用于识别所述视频流中的对象的关键点和关键点运动信息；

确定单元，用于根据所述关键点与AR模型的动作点之间的对应关系，确定与所述关键点对应的动作点；

控制单元，用于根据所述关键点运动信息，控制所述AR模型的动作点进行动作，以控制所述AR模型进行动作。