[发明专利]一种基于大数据的舆情系统

权利要求书

1.一种基于大数据的舆情系统，包括舆情规划、舆情采集、舆情数据、舆情分析以及舆情报告，其中：

舆情规划包括互联网引擎搜索，从互联网中提取多种关键词，还包括论坛、博客、新闻以及贴吧多个获取舆情信息；

舆情采集，包括文本聚类、文本分类、文本倾向性判断以及关键词抽取，所述舆情采集通过多重算法处理获得舆情数据；

舆情数据，包括内容入库储存、网页快照以及附件存储；

舆情分析，基于Tablestore构架，采用Blink计算系统对舆情数据进行分析并生成舆情报告；

舆情报告，包括舆情专报、舆情简报以及预警系统。

2.根据权利要求1所述的一种基于大数据的舆情系统，其特征在于：所述文本聚类对海量的无类别文档进行归类，在对文档集进行分词、向量化后得到特征集合，从全部特征集中提取一个最优的特征子集，对特征提取后的特征向量进行微调，突出聚类重要词进行聚类，把内容相近的文档归为一类得到聚类结果，并自动为其生成主题词，为确定类目名称提供方便，最后生成舆情专题、重大新闻事件追踪等；文本分类，一是获取训练文档集，初始的文档集来自上步骤中的文本聚类；

所述文本分类一是获取训练文档集，初始的文档集来自文本聚类，二是建立文档表示模型，三是进行文档特征选择，四是选择分类方法，主要采用KNN和支持向量机相结合的方法；血是建立性能评估模型，通过以上五个步骤对采集到的信息进行归类处理，为下一步的主题分析提供分类主题集；

所述文本倾向性判断能够判断态度和立场，倾向性分析对舆论热点的思想动向、倾向和走向至关重要，更能够从数量关系上揭示舆情的特点和规律。

3.根据权利要求1所述的一种基于大数据的舆情系统，其特征在于：所述多重算法处理包括热点发现算法、情感分析算法、预警分析算法以及垃圾过滤算法。

4.根据权利要求1所述的一种基于大数据的舆情系统，其特征在于：所述舆情数据通过Tablestore构架进行分析，结构化提取后发送至Blink计算系统进行舆情实时计算，重大舆情事件的预警，预警系统通过Tablestore和函数计算触发器对接来实现，通过结果表写入事件，可通过函数计算触发通知，完整的舆情分析结果和展示搜索利用Tablestore多元索引；

除实时计算外，支持批处理Tablestore的数据，低峰期批量处理部分数据并作为反馈结果写回Tablestore，既可以做实时流计算又可以离线批处理。

5.根据权利要求4所述的一种基于大数据的舆情系统，其特征在于：所述预警系统通过邮件、短信和APP发送预警通知。

6.根据权利要求1所述的一种基于大数据的舆情系统，其特征在于：所述舆情分析系统包括近期热点、负面消息、趋势分析、专题侦测、热点发现、舆情管理以及转载群站。