[发明专利]互联网多媒体信息挖掘分析系统

摘要

本发明的技术方案为：用户通过多媒体IO载体输入所需访问的多媒体内容或多媒体信息搜索条件；读取这些内容或根据搜索条件从互联网上获得多媒体内容；对于其中的图像/视频部分，判断所包含各个物体的区域及它们的内容；提取多媒体内容中与感知有关的特征；建立单幅图像中各物体间、视频中不同帧间同一物体、视频中不同镜头间、文本中相邻关键字间的特征关系；利用多媒体挖掘分析过程确定上述内容含有哪些敏感内容；将用户所需的内容通过IO载体反馈给用户。本发明综合了图像中物体之间的关系、视频中前后帧图像和音频的变化，以及文本中关键词上下文关系，适用于对互联网上视频/图像的挖掘/分析及对离线各个视频内容的分析和判断。

主权项

互联网多媒体信息挖掘分析系统，其特征在于是通过以下技术方案实现的：(1)用户通过多媒体IO载体输入他所需要访问的多媒体内容或者是多媒体信息搜索条件；(2)读取用户输入的多媒体内容或者根据多媒体搜索条件从互联网上获得多媒体内容；(3)对于获得的多媒体内容中的图像/视频部分，通过以下步骤判断其中所包含各个物体的区域以及它们的内容：①进行图像分割，获得多个局部区域；②对每个区域提取相应的色彩、纹理信息；③分析得到每个区域的物体含义；④将具有相同物体含义的相邻的区域进行合并，得到不同的区域并获知每个区域是什么物体；⑤将时间和空间上相邻的区域和物体进行联合分析，推理出物体的高层语义解释，以及事件/行为的计算机诠释，敏感内容识别。(4)根据视觉感知理论，提取多媒体内容中与感知有关的特征；(5)建立单幅图像中各个物体之间的特征关系，建立视频中不同帧之间同一物体的特征关系，建立视频中不同镜头之间的特征关系，建立文本中相邻关键字之间的特征关系；(6)通过支持大数据的云端处理机制，利用多媒体挖掘分析过程确定上述多媒体内容含有哪些敏感内容，比如色情、暴力、恐怖等，一组多媒体内容中可能还有1个或多个敏感内容；(7)将用户所需要的多媒体内容通过智能多媒体IO载体反馈给用户。