[发明专利]一种视频应用的手势交互方法、装置及系统

说明书

本发明属于视频应用领域，本发明提供一种视频应用的手势交互方法、装置及系统，其方法包括：通过分析视频应用画面中参与者的当前行为信息，识别所述参与者的当前交互手势；依据所述参与者的当前交互状态和所述当前交互手势，进行交互语义匹配；当所述视频应用系统匹配到在当前交互状态下，所述当前交互手势表达的交互语义时，所述参与者成功表达所述当前交互语义的真实意愿，通过所述视频应用对所述交互语义进行功能响应和/或应用响应。本发明实现在视频应用中进行有序的手势交互，自动分析交互结果并保存以使得到交互结果保持可靠性，进而后续能实时提取交互结果。

技术领域

本发明涉及视频应用领域，尤指一种视频应用的手势交互方法、装置及系统。

背景技术

目前在线视频应用领域中，当参与者与发言者或视频应用管理员进行交互时，通常只能选择打断发言者、或者在点击发言按钮、输入文字，视频应用次序受到挑战。输入操作也需要获取到键盘、鼠标、遥控器等输入设备。一个视频方有多人操作时，输入设备的使用也会比较混乱。

当视频应用需要多人参与时，如签到、决策时，只能按参与方做统计，无法按参与人员详细统计。

视频应用需要多人参与决策等可能会产生责权、法律效力的过程时，无法对决策过程进行存证，形成有效的合规记录。

发明内容

本发明提供一种视频应用的手势交互方法、装置及系统，实现了在视频应用中有序的进行手势交互，自动分析交互结果并保存以使得到交互结果保持可靠性，进而后续能实时提取交互结果。

本发明提供的技术方案如下：

一方面，一种视频应用的手势交互方法，包括以下步骤：

通过分析视频应用画面中参与者的当前行为信息，识别所述参与者的当前交互手势；其中，所述当前行为信息包括参与者、关节、肢体姿态、位置信息、运动轨迹、画面差异；

依据所述参与者的当前交互状态和所述当前交互手势，进行交互语义匹配；

当所述视频应用系统匹配到在当前交互状态下，所述当前交互手势表达的交互语义时，所述参与者成功表达所述当前交互语义的真实意愿，通过所述视频应用对所述交互语义进行功能响应和/或应用响应；

其中，所述参与者的当前交互状态包括通过在视频应用中自动识别判断的交互状态或由特定权限人员调整的交互状态。

进一步优选地，对视频应用画面进行实时或异步分析，获取参与者的特征信息；

基于所述参与者的特征信息识别所述参与者的身份，以使所述参与者的交互手势具备被识别的资格。

进一步优选地，还包括：

预定义交互语义、交互状态和交互手势，具体包括步骤：

视频应用根据不同阶段、不同场景、不同参与者及参与者的不同身份特性，预设不同的交互状态；

所述视频应用预设不同的交互语义，所述交互语义为参与者通过交互手势期望对所述视频应用进行功能操作和/或应用操作的真实意愿；

其中，所述预定义交互语义包括：交互手势与交互状态，每种交互语义对应一种视频应用中的功能或视频应用中的对应操作响应；所述交互状态包括视频应用功能响应、视频应用主持、视频应用管理、不同视频应用中不同场景下参与者状态等；所述预定义交互语义、所述交互状态和所述交互手势可以自定义新增、删除或修改；

在所述当前交互状态为功能响应状态时，通过分析所述视频应用画面中参与者的当前行为信息，识别所述参与者的当前交互手势，具体包括步骤：

当所述当前行为信息为单手手掌掌心置于嘴部时，所述当前交互手势的交互语义为麦克风静音或取消静音；