[发明专利]一种具有多种检索方式的多媒体系统及处理方法

权利要求书

1.一种多媒体系统，包括拍摄终端、服务器和查询终端；其特征在于：查询终端包括第三摄像单元、第三输入单元、查询单元、第三传输单元；其中，所述查询终端用于供用户通过多种方法检索所述多媒体。

2.一种使用根据权利要求1所述的多媒体系统的多媒体处理方法，其特征在于包括以下步骤：

步骤S100，用户使用拍摄终端拍摄多媒体，所述多媒体包括视频和音频；当在某一位置和/或变焦拍摄时，由计时单元记录下拍摄的开始时间和结束时间；随后，计时单元将事件、开始时间和结束时间一并保存到第一存储单元的记录表中，其中所述事件包括位置、变焦；

步骤S200，将多媒体中的音频转换为文字，转换后，在拍摄终端上显示给用户，供用户确认；如果用户认为转换的文字内容有错误或需要调整，则使用拍摄终端的第一输入单元进行修改；

步骤S220，拍摄终端通过第一传输单元将拍摄的多媒体、第一存储单元中的记录表、以及经过用户确认的文字上传到服务器的第二传输单元，服务器将拍摄的多媒体保存到数据库中，并记录多媒体ID，所述多媒体ID是上传的多媒体的唯一标识；

步骤S240，服务器根据记录表中的事件、开始时间和结束时间，使用解析单元从多媒体的视频中提取关键帧，并确定关键帧的录制时长，所述关键帧为拍摄终端在同一事件下拍摄的视频帧的代表；

步骤S260，得到视频中每个事件对应的关键帧和事件的持续时间，其中根据每个事件的开始时间和结束时间获取持续时间；

步骤S300，服务器从上传的文字中提取文字索引；对于每一个多媒体，服务器形成多媒体索引表，并存储在第二存储单元中；所述多媒体索引表包括：多媒体ID、文字索引、关键帧集合以及事件持续时间集合；

步骤S400，用户使用查询终端查找所述多媒体；

步骤S420，若查询终端中输入的是纯文字，则仅在文字索引中进行检索，并将检索结果呈现给用户，同时向用户提供没有文字说明的多媒体数目；

步骤S440，若查询终端中输入的仅是M幅照片，则查询终端形成照片集X：

X＝{X1,X2,…Xi,…XM}

则比较照片集X中的每幅照片和关键帧集合中的每个关键帧是否匹配，然后根据照片和关键帧的匹配程度，检索出相应的视频，并将按照相似度排序的检索结果呈现给用户；

相似度Sim的计算公式如下：

Sim=Σj=1MΣi=1eTijM*Σi=1eTi2]]>

其中，M为照片集X中的照片数量；e为视频中的事件数量，即关键帧数量；Ti为第i个事件的持续时间；Tij的取值有两个，当照片和关键帧不匹配时，Tij＝0；当照片和关键帧匹配时，Tij为匹配的第i个事件的持续时间；

步骤S460，若查询终端输入的既包括文字又包括照片，则先在文字索引中进行检索，如果检索结果少于特定阈值，则直接将结果呈现给用户；反之，如果检索结果大于或等于特定阈值，则在文字检索到的结果中使用步骤S440中的方法进行再次检索，并将检索结果呈现给用户。