[发明专利]一种基于大数据的舆情监测平台

说明书

本发明公开了一种基于大数据的舆情监测平台，属于大数据监测技术领域，包括互联网终端、网页咨询收集模块、用户浏览监测模块、关键词筛选模块、文本提取模块、数据预处理模块、舆情存储模块、分析判断模块、特征要求输入模块、特征模型建立模块、监测特征存储模块、报告生成模块、反馈模块和历史舆情库，本发明能够多次分析判断舆情文本，从而使得依据舆情文本的舆情信息质量较高，进而提高了监测的质量，且能够依据用户的实际要求挖掘舆情信息，使得舆情监测能够快速高效的进行，省时省力，降低了成本的消耗，同时方便用户读取结果，降低了读取的困难度，利于平台的推广。

技术领域

本发明涉及大数据监测技术领域，尤其涉及一种基于大数据的舆情监测平台。

背景技术

舆情是指在一定的社会空间内，围绕中介性社会事件的发生、发展和变化的过程，作为主体的民众对作为客体的社会管理者和企业及其政治、社会和道德方面的取向产生和持有的社会态度，它是较多群众对于社会中各种现象和问题所表达的信念、态度、意见和情绪表现的总和，而随着社会进入网络时代，舆情出现了新的分支，即网络舆情，网络舆情是社会舆情在互联网空间的映射，是社会舆情的直接反映，它不仅包括公开表达的行为、意见和态度，还包括潜在的情绪表现，随着网络信息爆发式增长，传统的数据处理已经不合适处理这样的数据，且互联网环境下的网络舆情并不是网络世界中直接存在的数据，而是通过相关技术从海量网络数据中经过提取并分析得来的结果。

经检索，中国专利号CN202010441042.4公开了一种基于大数据的舆情监测平台，其依据大数据搜集的舆情文本没有分析判断，使得舆情信息的质量较低，从而作为监测依据的准确度较低，降低了监测的质量，且无法依据用户的实际要求挖掘舆情信息，降低了舆情监测的效率，费时费力，同时提高了成本的消耗，带来了平台缺陷的问题。

发明内容

本发明的目的是为了解决现有技术中存在的缺陷，而提出的一种基于大数据的舆情监测平台。

为了实现上述目的，本发明采用了如下技术方案：

一种基于大数据的舆情监测平台，包括互联网终端、网页咨询收集模块、用户浏览监测模块、关键词筛选模块、文本提取模块、数据预处理模块、舆情存储模块、分析判断模块、特征要求输入模块、特征模型建立模块、监测特征存储模块、报告生成模块、反馈模块和历史舆情库；

其中，所述网页咨询收集模块包括咨询收集单元和HTML转化单元；所述用户浏览监测模块包括用户交互界面、数据对接单元和数据导入单元；所述数据预处理模块包括数据文本存储单元、测重单元、删除单元和发送单元；所述分析判断模块包括关联度计算单元、提取单元和上传单元；所述关键词筛选模块包括分词累计单元、词频阈值单元、剪除单元和词频排序单元。

进一步地，所述互联网终端用于连接互联网，并为网页咨询收集模块提供咨询数据；所述网页咨询收集模块用于生成咨询文本，并发送至关键词筛选模块和文本提取模块，其生成咨询文本的具体步骤为：

S1、咨询收集单元用于收集咨询数据，并存储咨询数据；

S2、HTML转化单元用于咨询数据的超文本标记转化，生成一个逻辑整体，即咨询文本；

所述关键词筛选模块用于筛选生成关键词列表，并发送至文本提取模块，其生成关键词列表的具体操作为：

SS1、分词累计单元用于提取咨询文本内的关键词，并累计相同关键词的词频，生成总表；

SS2、词频阈值单元用于设置关键词的词频标准值；

SS3、剪除单元用于总表与词频标准值的比对，并判断是否合格，其具体为：

A、若关键词的词频＜词频标准值，则不合格，即无用关键词；

B、若关键词的词频≥词频标准值，则合格，即有用关键词；