[发明专利]增强现实场景的处理方法、装置及设备、计算机存储介质

权利要求书

1.一种增强现实场景的处理方法，其特征在于，包括：

获取由摄像装置拍摄的第一视频帧中与目标标记图像相关的第一特征点信息；

确定第一视频帧和第二视频帧之间的光流场；

基于光流场上各个点的运动矢量以及第一特征点在第一视频帧中的位置，确定预估位置；

以第一特征点在第一视频帧中的位置确定出模板图像，以预估位置在第二视频帧上的位置确定出搜索图像；

根据所述第一视频帧上的模板图像在所述第二视频帧的搜索图像上搜索；

如果在所述第二视频帧的搜索图像上搜索出子图像，则将所述预估位置对应的点确定为第二特征点，并将该预估位置确定为第二特征点信息；

其中，所述子图像与所述模板图像的图像相似度大于预设的相似度阈值；构建第二视频帧与目标标记图像的单映射矩阵，所述单映射矩阵是根据各个第二特征点信息与所述目标标记图像的源特征点构建的；

对所述单映射矩阵进行处理，确定所述摄像装置在拍摄第二视频帧时的外参矩阵；

基于外参矩阵对所述第二视频帧进行增强现实处理。

2.如权利要求1所述的方法，其特征在于，在所述获取由摄像装置拍摄的第一视频帧中与目标标记图像相关的第一特征点信息之前，还包括：

获取由摄像装置拍摄的第一视频帧中的特征描述信息；根据获取的特征描述信息到属性数据库中进行检索；根据检索结果确定目标标记图像；

其中，所述目标标记图像的N个特征点的特征描述信息与所述第一视频帧相应的N个特征点的特征描述信息之间的相似度满足相似条件，N为正整数。

3.如权利要求1所述的方法，其特征在于，所述获取由摄像装置拍摄的第一视频帧中与目标标记图像相关的第一特征点信息，包括：

获取由摄像装置拍摄的第一视频帧与目标标记图像之间的初始单映射矩阵；

基于所述初始单映射矩阵对所述目标标记图像进行变换处理，得到变换后的目标标记图像；

根据变换后的目标标记图像中源特征点的位置确定出所述第一视频帧中的第一特征点，并获取该第一特征点在所述第一视频帧中的位置信息。

4.如权利要求3所述的方法，其特征在于，所述根据变换后的目标标记图像中源特征点的位置确定出所述第一视频帧中的第一特征点，包括：

以源特征点在变换后的目标标记图像中的位置确定模板图像；

以第一视频帧中与所述源特征点关联的初始特征点的位置确定搜索图像；

根据所述目标标记图像的模板图像在所述第一视频帧的搜索图像中进行图像搜索；

如果在所述第一视频帧的搜索图像中搜索出子图像，则将所述初始特征点作为第一特征点；其中，所述子图像与所述模板图像的图像相似度大于预设的相似度阈值。

5.如权利要求2所述的方法，其特征在于，所述获取由摄像装置拍摄的第一视频帧中的特征描述信息之前，还包括：

对目标标记图像进行预处理，得到预处理标记图像，所述预处理标记图像的图像尺寸大于所述第一视频帧，并且为灰度图；

从预处理标记图像中确定特征点，并获取所述确定的各个特征点的特征描述信息；

将各个特征描述信息存储到属性数据库中。

6.如权利要求1所述的方法，其特征在于，所述确定在所述摄像装置拍摄的第二视频帧中的第二特征点信息之后，还包括：

判断确定的第二特征点信息的数量是否小于数量阈值；

如果小于数量阈值，则从目标标记图像中确定出新的源特征点；

根据变换后的目标标记图像中所述新的源特征点的位置从第二视频帧中确定出新的第二特征点，获取该新的第二特征点在所述第二视频帧中的位置信息。