[发明专利]网络数据的同步处理方法、服务器及相关系统有效
申请号: | 201310460009.6 | 申请日: | 2013-09-30 |
公开(公告)号: | CN104519103B | 公开(公告)日: | 2018-10-26 |
发明(设计)人: | 马晓伟;汪坤先;王勇;王德文;宋俊豪 | 申请(专利权)人: | 腾讯科技(北京)有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 北京德琦知识产权代理有限公司 11018 | 代理人: | 张晓峰;宋志强 |
地址: | 100080 北京市海淀区海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 网络 数据 同步 处理 方法 服务器 相关 系统 | ||
本申请公开了网络数据的同步处理方法、服务器及相关系统,包括:利用数据库层的文件复制操作,从数据源服务器的数据库同步源数据到本地数据库;针对同步到本地数据库的所述数据,执行物化视图刷新,其中针对每个视图采用原子刷新方式;根据本地数据库的数据,进行业务逻辑计算;存储所述业务逻辑计算结果,并将所述业务逻辑计算结果同步给业务服务器。利用本发明,可以提高对网络数据的传输效率和处理效率,提升计算机的数据处理性能。
技术领域
本申请涉及数据处理设备的数据处理技术领域,尤其涉及一种网络数据的同步处理方法、服务器及相关系统。
背景技术
互联网数据系统中,由于需要处理海量的数据,因此对于网络数据系统架构的搭建以及数据处理方式有了特殊的要求,即要求占用的资源尽量少,处理数据的效率要尽量高。
如图1是一种网络媒介信息处理系统的架构及数据处理流转示意图。网络媒介信息是一种在互联网系统的各种展示形式(如网页、客户端界面等)上发布的以数字代码为载体的各种信息。通常的网络媒介信息都对应有目标网页,用户点击了网络媒介信息即可跳转到对应的目标网页,目标网页的内容就会展现在用户面前。网络媒介信息处理展示技术最近几年发展非常迅猛,已经应用到许多产业领域。例如在互联网的广告处理展示领域中,所述互联网广告就是一种网络媒介信息。网络媒介信息处理展示技术中的一种主要技术是网络媒介信息投放控制技术。
如何有效地向特定的受众投放展示网络媒介信息,并对所展示的信息进行有效的管理,往往需要进行大量的数据统计、存储和数据计算,需要合理的网络数据系统架构以及数据处理方式。
如图1所示,其中商业智能(BI,Business Intelligence)服务器101是一种数据源服务器,用于从网络的上游系统中搜集广告数据、订单数据、客户数据、点击曝光等效果数据等等。所述网络媒介信息运营分析工具系统(BB)备机102是一种数据计算服务器,用于从BI服务器101每天全量同步数据,然后执行例行任务(JOB),刷新物化视图,基于BI服务器同步来的源数据进行BB业务相关的业务逻辑计算,完毕后将计算结果同步到所述BB主机103。所述BB主机103为一种业务服务器,用于运行多个业务程序,由于会存在业务争抢资源的情况,所有将BB的业务逻辑计算部分分离出来在专门BB备机102上进行计算,而BB主机103只用于响应用户请求。另外,还进一步设置WEB服务器104,用于将所有业务模块生成文件缓存,每天更新一次,用户请求先到达该WEB服务器104,从该WEB服务器104的缓存中查询请求结果,如果缓存未命中请求结果时再请求BB主机。另外,系统中还可以设置预览服务器105,用于同步BB备机102的数据,进行同步预览,用于迭代测试,其中设置预览数据同步开发环境,在迭代开始时执行,开发机器106可以在该开发环境中进行程序开发。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(北京)有限公司,未经腾讯科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201310460009.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种虚拟资源的分配方法以及装置
- 下一篇:一种基于双向链路传输的调度方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置