[发明专利]一种基于用户轨迹的多媒体合成方法

权利要求书

1.一种基于用户轨迹的多媒体合成方法，其特征在于，包括以下几个步骤：

步骤一：建立空间区域资料的索引结构；

将目标场景根据空间区域和功能划分为若干个空间区域，空间区域的几何模型为空间区域中点的空间位置集合和空间区域半径；如果空间区域有相关的视频、音频、文字信息，则将相关的视频、音频、文字信息与空间区域中的地理位置建立映射关系，构建出空间区域资料的索引结构，通过给定空间区域能检索到与包含该区域的空间区域相应的多媒体资料；

步骤二：建立监控视频资料的索引结构；

场景内部署的监控设备都关联一个空间区域，采集的视频资料关联到对应的空间区域和时间坐标，监控视频资料通过网络传输到服务器；

步骤三：收集用户移动轨迹；

进入目标场景的用户携带一个定位装置，定位装置内设有微处理器、定位模块和存储模块，每隔一个周期触发一个定时器，定时读取定位模块得到的空间位置和时间坐标，然后将空间位置和时间坐标存入定位装置的存储模块中，形成了一个时间和空间位置记录序列，表示用户在目标场景内的移动轨迹。将移动轨迹传到服务器中；

步骤四：接收用户拍摄的图片资料；

如果用户有自身携带数码相机所拍摄的图片，将照片上传给服务器，如果相机有定位功能，可通过图片格式信息得到图片的拍摄时间和拍摄地点的空间位置，否则，将图片的拍摄时间与步骤三得到的移动轨迹的时间坐标进行匹配，获取拍摄图片的空间位置，最后将每张照片与一组空间位置(x，y，h)和一个时间坐标(t)相关联，建立索引，其中x，y，h分别为该位置点的经度、纬度和海拔高度；

步骤五：根据用户移动轨迹检索多媒体内容；

根据用户移动轨迹中的空间位置检索步骤一中与空间位置所在空间区域对应的多媒体资料，根据用户移动轨迹中的空间位置和时间坐标，检索步骤二中的监控视频资料，检索步骤四中的照片，最后得到符合用户在目标场景内移动轨迹的多媒体片段序列；

步骤六：多媒体资料合并生成视频文件；

将步骤五中得到的多个独立的多媒体片段序列，根据时间坐标顺序合成一个包含音频和视频内容的完整视频文件，根据时间坐标顺序和资料的类型进行取舍和剪切，并通过一般多媒体内容分析、特征提取和效果合成技术来优化视频质量。

2.根据权利要求1所述的一种基于用户轨迹的多媒体合成方法，其特征在于，所述的步骤二中，监控视频资料包括两类，一种为空间区域内固定摄像头拍摄视频，另外一种为空间区域内工作人员携带摄像机拍摄的视频；

对于空间区域内固定摄像头，预先采集空间区域内固定摄像头拍摄有效空间区域的空间位置，然后建立固定摄像头与拍摄有效空间区域的索引表，通过检索空间区域内固定摄像头所拍摄有效空间区域索引表，得到固定摄像头拍摄视频的位置与时间信息；对于空间区域内工作人员携带摄像机拍摄，空间区域内工作人员携带的摄像机上安装定位装置，通过定位装置得到摄像机拍摄的视频的位置与时间信息。

3.根据权利要求1所述的一种基于用户轨迹的多媒体合成方法，其特征在于，所述的步骤三中，用户携带定位模块中存储的空间位置和时间坐标，通过无线方式传送至服务器或者当用户归还设备后通过有线方式传到服务器。

4.根据权利要求1所述的一种基于用户轨迹的多媒体合成方法，其特征在于，所述的步骤五具体为：选出用户的移动轨迹(t₁，x₁，y₁，h₁)，(t₂，x₂，y₂，h₂)，(t₃，x₃，y₃，h₃)……其中，t为时间；对于第一个时间点(t₁，x₁，y₁，h₁)，搜索步骤一中包含空间位置(x₁，y₁，h₁)的空间区域的背景资料，搜索步骤二中所有包含空间位置(x₁，y₁，h₁)的空间区域，监控视频起始时间＜t₁＜监控视频终止时间的监控视频资料，搜索步骤四中用户拍摄图片，检索出图片的空间位置和时间坐标分别满足：x₁-x_u＜x＜x₁+x_u，y₁-y_u＜y＜y₁+y_u，h₁-h_u＜h＜h₁+h_u，t-t_u＜t＜t+t_u的图片，x_u，y_u，h_u，t_u表示很小的x变化，y变化，h变化和时间变化，由GPS精度和定位设备定位周期决定，然后得到视频片段的第一个序列file₁，然后搜索下一个时间点(t₂，x₂，y₂，h₂)，直到完成最后一个，得到符合目标用户在目标场景内移动轨迹的所有多媒体片段序列。