[发明专利]一种视频中笔记和动作同步的方法及装置

权利要求书

1.一种视频中笔记和动作同步的方法，其特征在于，包括：

根据笔记调整控制指令启动视频的编辑模式；

获取所述视频的人物抬手书写的起始时间，并根据当前编辑模式下显示的笔记时间轴获取对应的笔记的笔记起始时间；

判断人物抬手书写的起始时间与对应的笔记的笔记起始时间是否一致；

在不一致时，根据所述人物抬手书写的起始时间和对应的笔记的笔记起始时间调整所述视频的修改类外挂字幕结构文件中所有笔记的笔记起始时间；

所述获取所述视频的人物抬手书写的起始时间，包括：

在所述编辑模式下以预设播放速度播放所述视频，同时显示所述视频的播放时间轴，所述预设播放速度小于所述视频的正常播放速度；

根据用户在发现所述视频中人物抬手书写时刻输入的暂停指令暂停播放所述视频；

对暂停点前后N帧进行图像识别，获取具有人物首次抬手动作的一帧图像；所述N为预先设置的正整数；

将获取的具有人物首次抬手动作的一帧图像在所述视频的播放时间轴上对应的播放时间作为人物抬手书写的起始时间。

2.如权利要求1所述的视频中笔记和动作同步的方法，其特征在于，所述根据所述人物抬手书写的起始时间和对应的笔记的笔记起始时间调整所述视频的修改类外挂字幕结构文件中所有笔记的笔记起始时间，包括：

计算所述人物抬手书写的起始时间与对应的笔记的笔记起始时间的时间差；

根据所述人物抬手书写的起始时间与对应的笔记的笔记起始时间的时间差，调整所述视频的所有笔记的起始时间。

3.如权利要求2所述的视频中笔记和动作同步的方法，其特征在于，所述根据所述人物抬手书写的起始时间与对应的笔记的笔记起始时间的时间差，调整所述视频的所有笔记的起始时间，包括：

若所述人物抬手书写的起始时间晚于其对应的笔记的笔记起始时间，则将所述视频的修改类外挂字幕结构文件中所有笔记的起始时间均向后推延所述时间差；

若所述人物抬手书写的起始时间早于其对应的笔记的笔记起始时间，则将所述视频的修改类外挂字幕结构文件中所有笔记的起始时间均提前所述时间差。

4.如权利要求3所述的视频中笔记和动作同步的方法，其特征在于，所述根据所述人物抬手书写的起始时间和对应的笔记的笔记起始时间调整所述视频的修改类外挂字幕结构文件中所有笔记的笔记起始时间之后，还包括：

根据所述人物抬手书写的起始时间和对应的笔记的笔记起始时间修改所述视频的类外挂字幕结构文件中课件的起始时间。

5.一种视频中笔记和动作同步的装置，其特征在于，包括：

启动模块，用于根据笔记调整控制指令启动视频的编辑模式；

时间获取模块，用于获取所述视频的人物抬手书写的起始时间，并根据当前编辑模式下显示的笔记时间轴获取对应的笔记的笔记起始时间；

第一判断模块，用于判断所述时间获取模块获取的人物抬手书写的起始时间与对应的笔记的笔记起始时间是否一致，若不一致，则向同步模块发送同步指令；

同步模块，用于在收到所述同步指令后，根据所述时间获取模块获取的人物抬手书写的起始时间和对应的笔记的笔记起始时间调整所述视频的修改类外挂字幕结构文件中所有笔记的笔记起始时间；

所述时间获取模块包括：

播放模块，用于在所述启动模块启动的编辑模式下以预设播放速度播放所述视频，同时显示所述视频的播放时间轴；还用于根据用户在发现所述视频中人物首次抬手书写时刻输入的暂停指令暂停播放所述视频，并向图像识别模块发送第一指令；其中，所述预设播放速度小于所述视频的正常播放速度；

图像识别模块，用于根据所述播放模块发来的第一指令，对当前暂停播放的视频的暂停点前后N帧进行图像识别，获取具有人物首次抬手动作的一帧图像；所述N为预先设置的正整数；

获取模块，用于获取所述图像识别模块获取的人物首次抬手动作的一帧图像在所述视频的播放时间轴上对应的播放时间，并将其作为人物抬手书写的起始时间提供给所述同步模块，同时根据当前编辑模式下显示的笔记时间轴获取所述书写的起始时间对应的笔记的笔记起始时间并提供给所述同步模块。

6.如权利要求5所述的视频中笔记和动作同步的装置，其特征在于，所述同步模块包括：

计算模块，用于根据所述同步指令，计算所述时间获取模块获取的所述人物抬手书写的起始时间与对应的笔记的笔记起始时间的时间差，并将计算出的时间差提供给调节模块；

第二判断模块，用于判断所述时间获取模块获取的人物抬手书写的起始时间是否晚于其对应的笔记的笔记起始时间，若是，则向调节模块发送第二指令，否则，向调节模块发送第三指令；

调节模块，用于根据收到的第二指令，将所述视频的修改类外挂字幕结构文件中所有笔记的起始时间均向后推延所述计算模块提供的时间差；或根据收到的第三指令，将所述视频的修改类外挂字幕结构文件中所有笔记的起始时间均提前所述计算模块提供的时间差。