[发明专利]基于自然语言处理技术的公网海量信息监测方法和系统在审
申请号: | 201811067750.5 | 申请日: | 2018-09-13 |
公开(公告)号: | CN109359233A | 公开(公告)日: | 2019-02-19 |
发明(设计)人: | 江颖;钟山;沈超;张馨;陈锦聪 | 申请(专利权)人: | 广州帷策智能科技有限公司 |
主分类号: | G06F16/951 | 分类号: | G06F16/951;G06F17/27;G06Q50/00 |
代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 冯右明 |
地址: | 510620 广东省广州市天河区平云路*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及一种基于自然语言处理技术的公网海量信息监测方法和系统、计算机设备、计算机存储介质。上述方法包括:以预设的高频词作为关键词,爬取第一设定时间段内的公网文本数据并使用自然语言处理技术对其进行文本分析;对各个公网文本数据进行分词处理,识别公网文本数据的有效词,根据有效词库记录的词权重确定各个公网文本数据中有效词的词权重,以及依次记录公网文本数据中有效词词权重的词向量;其中,有效词为公网文本数据中除停止词之外的词;所述有效词库为记录各个词分别对应的词权重的数据库;根据所述词向量将所述公网文本数据分类,分别对各类公网文本数据进行监测。其具有较高的监测效率,有效提高了相应的监测效果。 | ||
搜索关键词: | 公网 文本数据 有效词 自然语言处理技术 权重 监测 海量信息 词向量 词库 记录 计算机存储介质 文本数据分类 计算机设备 分词处理 监测效率 权重确定 文本分析 高频词 时间段 预设 数据库 | ||
【主权项】:
1.一种基于自然语言处理技术的公网海量信息监测方法,其特征在于,包括:以预设的高频词作为关键词,爬取第一设定时间段内的公网文本数据;对各个公网文本数据进行分词处理,识别所述公网文本数据的有效词,根据有效词库记录的词权重确定各个公网文本数据中有效词的词权重,以及依次记录公网文本数据中有效词词权重的词向量;其中,所述有效词为公网文本数据中除停止词之外的词;所述有效词库为记录各个词分别对应的词权重的数据库;根据所述词向量将所述公网文本数据分类,分别对各类公网文本数据进行监测。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州帷策智能科技有限公司,未经广州帷策智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201811067750.5/,转载请声明来源钻瓜专利网。