[发明专利]一种水产养殖信息采集处理系统

摘要

本发明公开了一种水产养殖信息采集处理系统，包括Nutch网页抓取器、主题过滤模块、信息抽取模块、水产信息数据库、数据处理模块、Web服务器和浏览器。该系统基于水产养殖服务信息的主题过滤和信息抽取技术，实现网络资源的抓取、分类、过滤、抽取、入库更新等功能，并通过构建水产词典，实现对所抽取信息的合理准确分类。采用云计算技术和人工智能算法，开展基于网络化服务、WEB服务的水产养殖信息综合服务系统，实现高质量的水产信息服务。

主权项

一种水产养殖信息采集处理系统，其特征在于，包括Nutch网页抓取器、主题过滤模块、信息抽取模块、水产信息数据库、数据处理模块、Web服务器和浏览器；所述Nutch网页抓取器从当前国内水产养殖信息服务平台中的URL进行抓取，根据链接抓取策略访问所有网页，解析出网页内容和新的URL，并将解析出来的网页信息和新的URL信息送入主题过滤模块进行过滤；所述主题过滤模块经过主题过滤算法过滤掉与水产养殖主题无关的网页和URL，然后将URL入URL库，并将网页发送给信息抽取模块；信息抽取模块针对主题过滤模块过滤后得到的水产网页数据利用信息抽取技术对其他格式的文件通过Ultraseek的文件连接器和相应的信息抽取技术抽取为结构化的信息数据，并将抽取出的数据存储到水产信息数据库中；所述数据处理模块构建合理全面的水产词典，依据词典将得到网络资源的特征信息，进行统计分析和分类，利用当前已有的智能算法，通过算法对数据进行挖掘，对比分析，建立数据分析模型，通过模型分析，获取智能的、深入的、有价值的信息；Web服务器和浏览器用于水产养殖从业人员通过Internet和Web服务器通讯，水产养殖从业人员根据自身的需求，获得相关的信息。