[发明专利]用于输出信息的方法和装置

说明书

本申请公开了用于输出信息的方法和装置。上述方法的一具体实施方式包括：获取包含手势的目标图像；提取上述手势的特征点；根据所提取的特征点以及预先建立的手势识别模型，确定上述手势的手势类型，上述手势识别模型用于表征特征点与手势类型的对应关系；响应于确定预设的手势类型与控制命令的对应关系列表包括上述手势的手势类型，确定以及输出与上述手势的手势类型对应的控制命令。该实施方式增强了人的参与感，丰富了人机交互方式。

技术领域

本申请涉及计算机技术领域，具体涉及互联网技术领域，尤其涉及用于输出信息的方法和装置。

背景技术

随着互联网技术的发展，基于终端的娱乐活动不断增多。随着增强现实(Augmented Reality，AR)的出现，可以融合现实中的事物与虚拟环境，从而增加了人机互动的趣味性。目前的融合场景中，多依赖环境中固定的事物，人的参与感较弱。

发明内容

本申请实施例提出了用于输出信息的方法和装置。

第一方面，本申请实施例提供了一种用于输出信息的方法，包括：获取包含手势的目标图像；提取上述手势的特征点；根据所提取的特征点以及预先建立的手势识别模型，确定上述手势的手势类型，上述手势识别模型用于表征特征点与手势类型的对应关系；响应于确定预设的手势类型与控制命令的对应关系列表包括上述手势的手势类型，确定以及输出与上述手势的手势类型对应的控制命令。

在一些实施例中，上述获取包含手势的目标图像，包括：获取包含手势的视频流；将上述视频流中的多帧图像作为上述目标图像。

在一些实施例中，上述方法还包括：响应于确定上述手势类型与控制命令的对应关系列表不包括上述手势的手势类型，检测上述目标图像中是否存在至少两帧图像所包含的手势一致；响应于确定上述目标图像中存在至少两帧图像所包含的手势一致，确定上述手势在上述至少两帧图像中的位置；根据上述至少两帧图像在上述视频流中的位置以及上述手势在上述至少两帧图像中的位置，确定上述手势所形成的动作；根据预设的动作与控制命令的对应关系，确定以及输出与上述手势所形成的动作对应的控制命令。

在一些实施例中，上述获取包含手势的目标图像，包括：从上述视频流中选取一帧图像作为待检测图像；基于待检测图像，执行以下图像确定步骤：检测待检测图像的对比度是否满足预设条件；响应于确定待检测图像的对比度满足预设条件，将待检测图像作为目标图像；响应于确定待检测图像的对比度不满足预设条件，从上述视频流中选取未被选取的一帧图像作为新的待检测图像，继续执行上述图像确定步骤。

在一些实施例中，上述获取包含手势的目标图像，包括：响应于检测到用户的控制请求操作，向服务端发送手势识别模型获取请求；响应于接收到上述手势识别模型，获取包含手势的目标图像。

在一些实施例中，上述手势识别模型由深度学习模型训练得到；以及上述方法还包括手势识别模型的训练步骤：获取预置的训练样本集合，上述训练样本集合包括至少一种已标记手势类型的、不同拍摄角度的图像；提取上述训练样本中手势的特征点；将上述训练样本中手势的特征点输入待训练的深度学习模型，得到训练样本中手势的特征点对应的手势类型的预测结果；基于上述手势类型的预测结果与标记的手势类型之间的差异迭代更新深度学习模型的参数，以使上述手势类型的预测结果与标记的手势类型之间的差异满足预设的收敛条件。

在一些实施例中，上述预先建立的手势识别模型包括多种预设手势的特征点模型，上述特征点模型是采用深度学习算法对包含多种预设手势的、不同拍摄角度的样本图像进行特征点提取后生成的；以及上述根据所提取的特征点以及预先建立的手势识别模型，确定上述手势的手势类型，包括：确定所提取的特征点与上述多种预设手势的特征点模型之间的匹配度；将匹配度最高的特征点模型所属的预设手势的手势类型作为上述目标图像所包含的手势的手势类型。