[发明专利]跟踪手部/身体姿势

摘要

描述了跟踪来自图像数据的手部或身体姿势，以例如控制游戏系统、自然用户接口或用于增强现实。在各种示例中，预测引擎取得图像数据的单个帧，并且预测图像数据中所描绘的手部或身体的姿势上的分布。在示例中，随机优化器具有其迭代地提炼的手部或身体的候选姿势池，并且来自所预测的分布的样本用于替换池中的一些候选姿势。在一些示例中，来自池的最佳候选姿势被选择作为当前跟踪的姿势并且选择过程使用手部或身体的3D模型。

主权项

一种跟踪手部或身体的姿势的方法，包括：接收描绘所述手部或所述身体的图像的流；将所述图像中的一副图像的至少一部分输入到预测引擎以获得所述手部或所述身体的姿势上的分布；访问所述手部或所述身体的候选姿势池并且使用随机优化器迭代地提炼所述候选姿势；以及利用来自所述手部或所述身体的姿势上的所述分布的样本来周期性地替换所述池中的所述候选姿势的子集。