[发明专利]基于3DSIFT框架的时空兴趣点的检测方法及装置

摘要

本发明公开了一种基于3D SIFT框架的时空兴趣点的检测方法及装置，该方法及装置结合了灰度信息和运动变化信息。相对于现有技术，本发明构造了几何代数框架下的包含灰度信息和运动变化信息的GMCM，并通过该GMCM构造得到尺度空间，由于GMCM不仅包含视频的三维几何代数空间中的像素点的灰度信息，还包含了运动变化信息，使得构造得到的尺度空间是与运行变化信息有关的，且利用GMCM构造得到的尺度空间及金字塔模型实现了时空兴趣点的检测，充分利用了视频时域上的运动变化信息，增强了时空兴趣点的可重复性和鲁棒性等性能。

主权项

一种基于3D SIFT框架的时空兴趣点的检测方法，其特征在于，所述方法包括：基于视频包含的视频图像序列的视频图像空域信息和时域信息，得到所述视频的三维几何代数空间，且利用预置的灰度‑运动矢量算法得到所述三维几何代数空间中的每一个像素点的灰度‑运动矢量；利用所述像素点的灰度‑运动矢量构造所述视频的灰度与运动变化矩阵GMCM，并利用所述视频的GMCM构造所述视频的尺度空间；利用所述视频的尺度空间及下采样的方式对所述视频进行处理，构造所述视频的高斯金字塔，对所述高斯金字塔中相同组相邻层的高斯图像进行差分运算，得到高斯差分响应值图像，由所述高斯差分响应值图像构成所述视频时空域的高斯差分金字塔；在所述视频时空域的高斯差分金字塔中进行时空兴趣点的检测，以确定所述视频中包含的时空兴趣点。