[发明专利]一种基于手势交互的方法及系统

说明书

本申请提供的一种基于手势交互的方法及系统，该方法包括：获取用户手部的图像数据和/或视频数据作为第一数据；获取对所述第一数据进行识别的识别结果；若所述识别结果为从所述第一数据中确定所述用户的手部轮廓，与目标用户的手部轮廓匹配，则引导所述用户以第一交互模式进行交互；若所述识别结果为所述用户的手部轮廓与目标用户的手部轮廓不匹配，或所述用户以第一交互模式进行交互失败，则引导所述用户以第二交互模式进行交互；若所述用户以第二交互模式进行交互失败，则引导所述用户以第三交互模式进行交互，直至实现所述用户成功交互。本申请实施例能够兼顾用户进行手势交互的效率和安全性，以提升用户进行手势交互的体验。

技术领域

本申请涉及计算机技术领域，尤其涉及一种基于手势交互的方法及系统。

背景技术

随着数字化及信息技术的发展，基于用户的手势进行交互已经越来越普遍。现如今，手势交互可以分为接触式和非接触式，即用户在手势交互时是否与设备接触。

然而，无论采用那种形式的手势交互，若只考虑高交互效率让用户很快完成手势交互，则会忽略实现交互目标的安全性；相应地，若考虑高安全性设置繁琐的手势交互流程，则会大大降低手势交互的效率。因此现有手势交互无法兼顾交互效率和安全性。

发明内容

本发明实施例的目的在于提供一种基于手势交互的方法及系统，本申请实施例能够通过灵活的手势交互规则，来实现兼顾用户进行手势交互的效率和安全性。具体技术方案如下：

在本发明实施例的第一方面，提供一种基于手势交互的方法，包括：

获取用户手部的图像数据和/或视频数据作为第一数据；

获取对所述第一数据进行识别的识别结果；

若所述识别结果为从所述第一数据中确定所述用户的手部轮廓，与目标用户的手部轮廓匹配，则引导所述用户以第一交互模式进行交互；

若所述识别结果为所述用户的手部轮廓与目标用户的手部轮廓不匹配，或所述用户以第一交互模式进行交互失败，则引导所述用户以第二交互模式进行交互；

若所述用户以第二交互模式进行交互失败，则引导所述用户以第三交互模式进行交互，直至实现所述用户成功交互。

可选地，所述若所述识别结果为从所述第一数据中确定所述用户的手部轮廓，与目标用户的手部轮廓匹配，则引导所述用户以第一交互模式进行交互，包括：

根据所述图像数据，获取所述用户的手部轮廓作为第一轮廓；

根据所述第一轮廓，获取所述第一轮廓的多个关键点；

获取与所述第一轮廓的多个关键点对应的多个匹配点；其中，所述匹配点来自第二轮廓，所述第二轮廓为所述目标用户的手部轮廓；

计算每个所述关键点与每个所述匹配点的匹配值，得到所述匹配值的和值；其中，若所述和值大于预设阈值，则判定所述识别结果为成功，引导所述用户以第一交互模式进行交互。

可选地，所述第一交互模式为第一非接触交互，所述引导所述用户以第一交互模式进行交互，包括：

获取所述用户的第三轮廓，所述第三轮廓为所述第一轮廓对应手部的另一手部轮廓；

计算所述第三轮廓对应的关键点与匹配点的匹配值之和，若所述匹配值之和大于所述预设阈值，则判定所述用户以所述第一交互模式进行交互成功，否则为交互失败。

可选地，所述引导所述用户以第二交互模式进行交互，包括：

判断所述第二数据中是否包含所述目标手势类型；其中，所述第二数据为在所述第一交互模式交互失败后获取的所述用户手部的图像数据和/或视频数据；