[发明专利]一种静动态手势结合的汉字书写方法及系统

权利要求书

1.一种静动态手势结合的汉字书写方法，其特征在于，该方法包括如下步骤：

采用Kinect进行人脸检测，确定操作者；

识别操作者双手轮廓及各指指尖，并确定书写指尖；

实时跟踪书写指尖并进行轨迹绘制，检测到绘制完成命令时，将留有书写轨迹的图片进行OCR识别；获得相应字母，当获得的字母不是预期字母时，触发将该字母删除，重新绘制；重复该步直至完成整个拼音；

根据整个拼音推送该拼音相应的候选汉字，采用静态手势选择所需汉字。

2.根据权利要求1所述的静动态手势结合的汉字书写方法，其特征在于，跟踪指尖过程进行轨迹绘制时采用Kalman滤波进行平滑操作。

3.根据权利要求1所述的静动态手势结合的汉字书写方法，其特征在于，在进行轨迹绘制时，设置断点：将手握拳使得系统检测不到书写指尖，形成断点，保持握拳状态将手从上一笔划终点移动至下一笔划起点，伸出书写指尖继续书写。

4.一种静动态手势结合的汉字书写系统，其特征在于，该系统包括实现书写字母的客户端和实现Unity汉字显示界面的服务器，客户端基于Kinect设备，与服务器间通过Socket通信来连接；在客户端完成对操作者的人脸检测及对双手轮廓及指尖的检测；并通过实时跟踪指尖的移动来进行轨迹的绘制；检测到绘制完成命令后，对轨迹图片进行OCR识别，获得相应的字母；直至完成拼音，客户端将整个拼音发送至服务器，服务器显示该拼音候选汉字，由静态手势选择预期汉字。