[发明专利]基于大数据的地区舆情监控及决策辅助系统和方法

摘要

一种基于大数据的地区舆情监控及决策辅助系统：信息采集存储模块，用于对采集的舆情源信息进行结构化存储管理，形成实时更新的地区大数据舆情知识库；数据预处理模块，用于对地区大数据舆情知识库中的数据进行预处理，形成完整有序的数据集；大数据舆情分析模块，用于对指定条件的热点话题等进行舆情分析及趋势预测得到舆情分析及趋势预测结果；舆情监控预警、决策辅助模块，用于对预定义的敏感词库中的敏感词对挖掘和分析的定制舆情进行实时的监控跟踪、管理和疏导；通过站内消息、短信、邮件方式将定制舆情通知给决策者；后台管理模块，用于对舆情信息分类管理、用户与权限管理、关键词管理、采集管理、内容管理、专题管理及分析报告管理。

主权项

1.一种基于大数据的地区舆情监控及决策辅助系统，其特征在于，其包括如下模块：信息采集存储模块，用于实时采集特定区域内的舆情源信息，并对采集的舆情源信息进行结构化存储管理，形成实时更新的地区大数据舆情知识库；数据预处理模块，用于对地区大数据舆情知识库中的数据进行预处理，形成完整有序的数据集，为后续的大数据舆情分析模块提供可用的待分析的数据，包括对地区大数据舆情知识库中的数据进行IP定位、网址有效性检查，然后通过网页解析、自动识别、相关度计算、文件编码处理网络舆情提取技术进行舆情信息提取；再经过文章自动去重与文章相似度分析判别步骤自动去掉重复数据；通过正文自动识别与提取技术、标题自动识别与提取技术智能获取舆情正文、智能摘要和关键词；通过垃圾信息过滤、停用词过滤步骤进行数据的预处理；大数据舆情分析模块，用于根据地区舆情监控分析的特点，针对舆情相关的影响因子，建立分析组件库、分析模型库，通过分析模型库中配置器进行数据模型配置，并通过数据挖掘算法对配置的数据模型进行挖掘分析，对指定条件的热点话题、媒体类型传播角度、媒体报道重要角度、媒体正负面声音角度、媒体间的转载关系角度、媒体区域分布角度进行舆情分析及趋势预测得到舆情分析及趋势预测结果；舆情监控预警、决策辅助模块，用于预定义敏感词库中的敏感词，根据预定义的敏感词库中的敏感词对地区舆情分析所关注的各个方面的定制舆情进行定向挖掘、分析；并根据舆情分析及趋势预测结果，预定义的敏感词库中的敏感词对挖掘和分析的定制舆情进行实时的监控跟踪、管理和疏导；并用于通过站内消息、短信、邮件方式将定制舆情通知给决策者；后台管理模块，用于舆情信息分类管理、用户与权限管理、关键词管理、采集管理、内容管理、专题管理及分析报告管理。