[发明专利]一种用于虚拟现实设备的手势识别控制方法

摘要

本发明公开了一种用于虚拟现实设备的手势识别控制方法，虚拟现实设备包括多个3D深度摄像机及控制器，方法包括建立手部的骨架和三维模型，深度摄像机对手部进行跟踪，并对手部骨架模型进行优化，进而控制三维模型的变形，进一步根据三维模型变形信息，快速实时地检测手部与环境发生的交互作用，实现用户与虚拟环境的互动。本发明的方法降低了虚拟现实设备的手势控制过程中的计算量，提高手势理解的精度，实现了用户与虚拟环境快速逼真的互动作用。

主权项

一种用于虚拟现实设备的手势识别控制方法，所述虚拟现实设备包括多个3D深度摄像机及控制器，所述多个3D深度摄像机从不同维度获得手部的深度图像，控制器从3D深度摄像机获得深度图像信息并根据所获得的信息对手部进行跟踪，恢复手部模型并对手势进行理解，其特征在于，所述方法包括：1)选取手部关键点，建立手部的骨架模型，并且建立三维模型，且在此手部三维模型的基础上选取特征点；2)采用多个3D深度摄像机对手部进行跟踪，获得双手的初始像素信息，并将像素信息与上述骨架模型上的关键点进行匹配，获取准确的初始关键点位置；3)持续对手部进行跟踪，获得获得关键点的坐标，对手部的骨架模型进行优化，并根据所获得的参数信息获取手部外形信息和手部特征信息，应用于手部三维模型，控制手部三维模型的变形；4)根据所获得的手部三维模型变形信息，快速实时地检测手部与环境发生的交互作用，实现用户与虚拟环境的互动。