[发明专利]一种收集、分析和分发网络商业信息的系统数据组件

说明书

技术领域

本发明涉及利用信息通信与数据处理技术，实现对分布于互联网的不同结构、海量的商业信息进行实时收集、处理、交换和分发的系统，特别是针对国际跨境贸易碎片化商业信息进行处理的系统数据组件。

背景技术

商业信息的系统通过实时收集国际贸易业务流程中各个环节的碎片化商业信息，包括国际贸易交易数据、实时物流信息、国际贸易参与者发布内容等信息数据，进行实时的归类分析，并通过提供系统数据组件：以支持多种不同形式的终端服务方式，即时收集、分析和分发国际贸易中有效的商业信息。

本发明主要用于国际跨境贸易参与者实时了解国际贸易市场动态，参与网络交易及信息交互，及时纠正或修正在国际贸易交易过程中的偏差。特别是：本发明能够将国际贸易中碎片化的商业信息进行及时有效的收集和汇总，并通过数据挖掘分析，将用户从大数据流中获取有效商业数据的纷繁复杂业务流程中解放出来，并及时作出正确的商业贸易判断和决策，并有效的推动商业信息收集、分析和分发技术的发展与创新。

“信息碎片化”、“垃圾内容多”已成为网络商业信息传播与应用中被诟病最多的缺陷。基于网络的商业信息、特别是国际跨境贸易信息的数据量非常大，而其中真正有价值的商业信息却不多。同时海量分散的网络信息来源也不是都与商业应用有关联，这就要求通过数据处理技术的使用对大量的商业信息数据流进行深层分析，以获得有利于商业贸易判断与决策的信息，数据实时收集处理就成为巨大的技术挑战。商业网络不缺乏信息，缺的是从海量商业信息中，将有价值的内容提炼并展现至用户面前的功能和机制。

商业竞争是知识生产率而不是劳动生产率的竞争，商业数据分析产生的价值可能比较碎片化，分布在商业贸易流程的各个环节，其实网络碎片化商业数据的综合应用问题：一是要在以前没有收集商业数据的网络节点收集商业数据，这主要是利用信息通信的技术；二是要让不同系统的数据有效对接起来，这是系统整合的任务；最后，还要利用数据可视化的技术把海量商业数据中隐藏的有效的商业信息揭示、展现出来，也就是说，数据的收集、整合、分析、展现才是网络商业信息传播与应用的核心，要解决用户对网络商业信息的收集、分析和分发需求，提供有效的服务，就必须围绕价值信息与关系链进行分组，将数据内容和用户需求进行高关联度重组，依托后台数据与语义分析的强大功能，将网络碎片化的商业信息与商业贸易信息需求做即时匹配，直接指向商业贸易关联事件的时间轴发展页面，以全面提升用户体验。

由于商业信息零散分散在互联网的各个不同节点、不同系统，统一的商业贸易业务不同环节产生的商业信息也零碎的保存在不同地方，因此收集、分析和分发网络商业信息，就需要将各零散的网络商业数据以数据交换的方式整合汇总到一起，使其原来零散信息根据业务进行集成。整合后的商业数据便可以根据需要进行数据分析和挖掘，这样也才能真正发挥出商业数据的价值。零碎的数据只对本系统和局部有意义，数据整合和数据交换就是必经的环节。现在已有这方面的技术产品和数据集成方面的公司，专门从事信息方面的处理。数据集成是信息化发展必经的一个过程。

现有提供收集、分析和分发网络商业信息的服务系统：大多采用基于LAMP（Linux-Apache-MySQL-PHP/Perl/Python）的架构，该架构包括：Linux操作系统，Apache服务器，MySQL数据库，Perl、PHP或者Python脚本语言，所有组成产品均是开源软件，是国际上成熟的架构，很多流行的互联网商业应用都是采取这个架构。和Java/J2EE架构相比，LAMP具有Web资源丰富、轻量、快速开发等特点，其形成原因如下：

1）选择了高性能OS

首先，不难理解，任何一个server最底层的支撑还是OS，而OS的选择，主要包括Unix,Windows server,Linux,BSD等等。其中，开源的OS，有Linux,BSD及部分unix。从目前使用情况来看，linux还是网站首选OS之一。

2）选择了高性能web server

Apache是LAMP架构最核心的web server，开源，模块丰富，功能强大，稳定是它的绝对优势。

3）选择了高性能database

数据库是任何网站走动态化内容展现及业务数据存储的保障。市面上的开源数据库主要有mysql,postgresql,berkeley db,sqlite等。其中，对比如下：