[发明专利]可交互视频生成器、播放器及其生成方法、播放方法

权利要求书

1.一种可交互视频生成方法，其特征在于，包括：

对原视频数据进行解码，逐帧获取视频帧图像；

逐帧对视频帧图像进行特征点提取，生成特征描述数据；

根据每一视频帧图像的特征描述数据，在服务器端的图像数据库中进行搜索，获取与该视频帧图像某区域匹配的样本图像及相关可交互元素；

将匹配成功的视频帧图像与样本图像进行配准，计算单应性矩阵；

将配准成功的视频帧图像设定为关键帧，并将每一关键帧与其对应的可交互元素及单应性矩阵绑定，形成关键帧数据，所述可交互元素内绑定有对应元素的可交互事件；

所有视频帧图像处理完毕后，将原视频数据与各关键帧数据融合封装，形成可交互视频。

2.如权利要求1所述的方法，其特征在于，所述逐帧对视频帧图像进行特征点提取，生成特征描述数据步骤，具体为如下三种方式之一：

A：对每一视频帧图像的全图进行特征点提取，生成特征描述数据；

B：检测每一视频帧图像中是否包含预先选定的子图像区域，若是，则对该子图像区域进行特征点提取，生成特征描述数据；

C：对每一视频帧图像进行前景分割，对前景区域进行特征点提取，生成特征描述数据。

3.如权利要求2所述的方法，其特征在于，所述方法还包括匹配图像跟踪，即当某一视频帧图像配准成功后，在下一视频帧图像中跟踪配准成功的图像特征点，由跟踪算法得到下一帧视频帧图像对应的单应性矩阵；

当跟踪丢失时，再对当前帧视频帧图像进行特征点检测与图像配准。

4.如权利要求1至3中任一项所述的方法，其特征在于，所述可交互元素包括视频、图像、音频、网页、文本、3D模型、URI地址中的一种或多种。

5.一种可交互视频生成器，其特征在于，包括视频解码模块、图像特征提取模块、图像搜索模块、图像配准模块和数据融合模块，其中：

所述视频解码模块，用于对原视频数据进行解码，逐帧获取视频帧图像；

所述图像特征提取模块，用于逐帧对所述视频解码模块解析出的视频帧图像进行特征点提取，生成特征描述数据，将其传递给图像搜索模块；

所述图像搜索模块，用于根据所述图像特征提取模块传递来的每一视频帧图像的特征描述数据，在服务器端的图像数据库中进行搜索，获取与该视频帧图像某区域匹配的样本图像及相关可交互元素，将匹配成功的样本图像的特征描述传递给图像配准模块，并将与该视频帧图像相关的可交互元素传递给数据融合模块；

所述图像配准模块，用于将匹配成功的视频帧图像与样本图像进行配准，计算单应性矩阵；

所述数据融合模块，用于将所述图像配准模块配准成功的视频帧图像设定为关键帧，将每一关键帧与其对应的可交互元素及单应性矩阵绑定，形成关键帧数据，所述可交互元素内绑定有对应元素的可交互事件；并在所有视频帧图像处理完毕后，将原视频数据与各关键帧数据融合封装，形成可交互视频。

6.如权利要求5所述的可交互视频生成器，其特征在于，所述可交互视频生成器还包括预选图像区域检测模块，用于检测每一视频帧图像中是否包含预先选定的子图像区域；若检测到该视频帧图像中包含预先选定的子图像区域，则将该视频帧图像或该子图像区域发送到所述图像特征提取模块，由所述图像特征提取模块对该子图像区域进行特征点提取，生成特征描述数据。

7.如权利要求5所述的可交互视频生成器，其特征在于，所述可交互视频生成器还包括前景分割模块，用于对每一视频帧图像进行前景分割，并将该视频帧图像的前景区域发送到所述图像特征提取模块，由所述图像特征提取模块对前景区域进行特征点提取，生成特征描述数据。

8.如权利要求5至7中任一项所述的可交互视频生成器，其特征在于，所述可交互视频生成器还包括跟踪模块，所述跟踪模块用于当某一视频帧图像配准成功后，在下一视频帧图像中跟踪配准成功的图像特征点，由跟踪算法得到下一帧视频帧图像对应的单应性矩阵；当跟踪丢失时，所述跟踪模块再将当前视频帧图像交回所述图像特征提取模块，继续进行特征点检测与图像配准。

9.一种可交互视频生成系统，其特征在于，包括可交互视频生成器和服务器端，所述可交互视频生成器为权利要求5至8中任一项所述的可交互视频生成器；所述服务器端用于存储样本图像数据及相关可交互元素。