[发明专利]一种基于机器学习的针对WiFi数据的手势识别方法

说明书

本发明公开了一种基于机器学习的针对WiFi数据的手势识别方法，涉及物联网动作识别领域，包括以下步骤：S1：构建多任务感知模型，所述的多任务感知模型包括若干个单任务模型、一个残差适配器、第一深度编码器；所述的单任务模型包括浅编码器、第二深度编码器、分类器；S2：将WiFi的CSI信道数据作为输入样本输入到多任务感知模型，采用知识蒸馏的方法对多任务感知模型进行训练，得到训练后的多任务感知模型。S3：利用训练后的多任务感知模型对WiFi数据进行预测分类，实现手势识别；本发明通过构建的多任务感知模型对WiFi的CSI信道数据中的多任务进行分类识别，实现针对WiFi数据进行手势识别，提高手势识别的准确率。

技术领域

本发明涉及物联网动作识别领域，更具体的，涉及一种基于机器学习的针对WiFi数据的手势识别方法。

背景技术

手势识别(human gesture recognition,HGR)在人机交互中发挥着重要作用，可以支持许多新兴的物联网应用，如智能家居、用户认证和医疗保健传统的手势识别系统依赖于摄像机、可穿戴设备和智能手机；这些方法会产生额外的设备成本，降低用户舒适度或引起隐私问题；具体来讲，基于计算机视觉的手势识别已经是较为成熟的方案；但是，该类方案需要使用摄像头进行图像获取，存在用户隐私泄露的风险；同时，该方案只能够在视距条件下进行手势识别，限制了应用场景。此外，基于可穿戴设备和手机内置传感器的方案需要用户随身携带，极大的影响了用户的舒适度。

近年来，随着泛在网技术的不断发展，无线射频感知获得了快速的发展及大量的关注；其中，基于Wi-Fi、WB、MCW radar、米波的感知研究层出不穷；由于射频感知数据不具有直接的语义信息，因此该技术具有极高的隐私性；此外，该方案是无穿戴的非侵入式感知，对用户的舒适性无影响；相对于其他的射频感知方案，基于商用Wi-Fi设备的感知还具有易部署和低成本的优点，而备受关注。

尽管基于WiFi的传感领域取得了重大进展，但各种开创性方法仅限于单任务传感，例如人类活动识别、室内定位、步态识别、呼吸检测；有一些关于基于WiFi的多用户手势识别的研究，然而，ARIL和WiHF是仅有的两项基于WiFi的多任务传感的工作；具体而言，ARIL旨在执行活动识别和室内定位的联合任务，构建在通用软件无线电外围设备上，而不是商业WiFi设备上，这降低了实用性；WiHF专注于同时实现跨域手势识别和用户识别，只能处理联合手势识别和用户识别任务。

基于WiFi的多任务传感的开发将提供比单任务传感更多的用户信息，这将促进许多物联网应用。例如，在智能家居应用中，该系统可以提供“谁在哪里做什么”的信息，这将有助于智能家居系统准确响应用户；

现有技术公开了一种用于手势检测和手势识别的多模态多任务模型，包括模态特征提取模块、多模态融合模块、模型多任务分类模块，其中，模态特征提取模块包括分别提取不同模态数据特征的网络结构以及共享特征层，所述模态特征提取模块用于对多模态数据进行预处理，提取共享多模态特征；多模态融合模块包含多模态通道注意力模块和任务相关特征层，所述多模态融合模块与模态特征提取模块相连接，以所述共享多模态特征作为多模态通道注意力模块的输入，提取融合后的任务相关特征，得到任务相关特征层；模型多任务分类模块与多模态融合模块相连接，以所述融合后的任务相关特征作为输入，对每个任务进行分类；其中，在训练过程中所述模态特征提取模块、所述多模态融合模块、所述模型多任务分类模块的网络参数被迭代更新。但现有技术并非针对WiFi数据进行手势识别，手势识别的准确率低。

发明内容

本发明为了解决现有技术中并非针对WiFi数据进行多任务感知，手势识别的准确率低的问题，提出了一种基于机器学习的针对WiFi数据的手势识别方法，通过对WiFi的CSI信道数据的处理，实现针对WiFi数据进行手势识别，提高手势识别的准确率。

为解决上述技术问题，本发明采用的技术方案是：

一种基于机器学习的针对WiFi数据的手势识别方法，包括以下步骤：