[发明专利]一种网络舆情信息有效性的自动识别处理方法

摘要

本发明涉及一种网络舆情信息的有效性自动识别处理方法及系统，方法包括对接收的网络信息进行文本识别，并将网络信息分为长文本和短文本当网络信息为长文本时，将与长文本数据库中的信息有区别的网络信息标记为长文本更新目标舆情信息，同理标记短文本更新目标舆情信息；对长文本更新目标舆情信息和短文本更新目标舆情信息进行特征要素的提取，根据特征要素生成舆情事件；判断舆情事件是否已存在，当舆情事件不存在时，新建舆情事件，当舆情事件已存在时，将舆情事件归并且关联至已经存在的事件中；将新建舆情事件和舆情新增内容推送至用户。本发明实现了舆情的自动精准甄别和准确推送，节约了人员成本和时间成本，提高了舆情监管的效率。

主权项

一种网络舆情信息有效性的自动识别处理方法，其特征在于，包括以下步骤：数据甄别模块接收数据采集模块发送的网络信息，对所述网络信息进行文本识别，并将所述网络信息分为长文本和短文本：当所述网络信息为长文本时，基于Weka单元将所述网络信息与长文本数据库中的信息对比，如果所述网络信息与长文本数据库中的信息重复或者所述网络信息不属于目标舆情信息，则弃掉，如果所述网络信息与长文本数据库中的信息有区别，则将所述网络信息标记为长文本更新目标舆情信息，当所述网络信息为短文本时，基于Python单元将所述网络信息与短文本数据库中的信息对比，如果所述网络信息与短文本数据库中的信息重复或者所述网络信息不属于目标舆情信息，则弃掉，如果所述网络信息与短文本数据库中的信息有区别，则将所述网络信息标记为短文本更新目标舆情信息，将所述长文本更新目标舆情信息和所述短文本更新目标舆情信息发送至舆情事件生成模块；舆情事件生成模块接收所述长文本更新目标舆情信息和所述短文本更新目标舆情信息，对所述长文本更新目标舆情信息和所述短文本更新目标舆情信息进行特征要素的提取，根据所述特征要素生成舆情事件，并将所述舆情事件发送至舆情判重模块；舆情判重模块接收所述舆情事件，判断所述舆情事件是否已经存在，当所述舆情事件不存在时，新建所述舆情事件，并将新建舆情事件发送至舆情推送模块，当所述舆情事件已经存在时，将所述舆情事件归并且关联至已经存在的事件中，并将所述舆情事件中与所述已经存在的事件不同的舆情新增内容发送至舆情推送模块；舆情推送模块接收所述新建舆情事件和所述舆情新增内容，并将所述新建舆情事件和所述舆情新增内容推送至用户。