[发明专利]客户端程序数据采集方法及系统在审
申请号: | 201810784703.6 | 申请日: | 2018-07-17 |
公开(公告)号: | CN109063040A | 公开(公告)日: | 2018-12-21 |
发明(设计)人: | 闻立杰;李肖赫 | 申请(专利权)人: | 清华大学 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 王莹;吴欢燕 |
地址: | 100084 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 客户端程序 目标函数 调用 采集 函数调用信息 函数调用 获取数据 目标功能 数据采集 反射 客户端界面 定义函数 定义目标 功能调用 函数执行 重新执行 返回 筛选 记录 | ||
本发明实施例提供一种客户端程序数据采集方法及系统。该方法包括:执行客户端程序的目标功能,并在执行过程中记录获得函数调用信息,目标功能是与客户端程序获取数据相关的功能;对函数调用信息中的各函数进行筛选,获得与获取数据相关的目标函数,并定义目标函数的函数调用逻辑;根据函数调用逻辑,采用反射调用的方式依次调用各目标函数,获得目标函数的返回值。本发明实施例从客户端程序功能调用时的函数执行的角度出发,通过定义函数调用逻辑,采用反射调用的方式重新执行目标函数的流程,进而获得目标函数的返回值以实现数据的采集,无需在客户端界面中采集就能够实现客户端程序数据的采集,提高了采集效率。
技术领域
本发明实施例涉及计算机领域,更具体地,涉及一种客户端程序数据采集方法及系统。
背景技术
近年来,大数据技术高速发展。由于大数据的价值是来自于各个来源的数据的融合,以及基于此的智能化分析。而数据孤岛问题会影响数据的融合,因此,数据孤岛问题逐渐吸引了大家的关注。为了解决数据孤岛问题,数据集成是突破“信息孤岛”最为有效的方法。因此如何实时全面的获取互联网中的数据成为人们关心的重要问题。为解决这类问题,各种用于采集互联网数据的爬虫方法一直是人们的研究热点。但是,针对各类客户端程序,通常采用人工采集的方式,其存在着采集效率低的缺陷。
发明内容
为了解决上述问题,本发明实施例提供一种克服上述问题或者至少部分地解决上述问题的客户端程序数据采集方法及系统。
根据本发明实施例的第一方面,提供一种客户端程序数据采集方法,该方法包括:执行客户端程序的目标功能,并在执行过程中记录获得函数调用信息,目标功能是与客户端程序获取数据相关的功能;对函数调用信息中的各函数进行筛选,获得与获取数据相关的目标函数,并定义目标函数的函数调用逻辑;根据函数调用逻辑,采用反射调用的方式依次调用各目标函数,获得目标函数的返回值。
根据本发明实施例第二方面,提供了一种客户端程序数据采集系统,该系统包括:记录模块,用于执行客户端程序的目标功能,并在执行过程中记录获得函数调用信息,目标功能是与客户端程序获取数据相关的功能;筛选模块,用于对函数调用信息中的各函数进行筛选,获得与获取数据相关的目标函数,并定义目标函数的函数调用逻辑;调用模块,用于根据函数调用逻辑,采用反射调用的方式依次调用各目标函数,获得目标函数的返回值。
根据本发明实施例的第三方面,提供了一种电子设备,包括:至少一个处理器;以及与处理器通信连接的至少一个存储器,其中:存储器存储有可被处理器执行的程序指令,处理器调用程序指令能够执行第一方面的各种可能的实现方式中任一种可能的实现方式所提供的客户端程序数据采集方法。
根据本发明实施例的第四方面,提供了一种非暂态计算机可读存储介质,非暂态计算机可读存储介质存储计算机指令,计算机指令使计算机执行第一方面的各种可能的实现方式中任一种可能的实现方式所提供的客户端程序数据采集方法。
本发明实施例提供的客户端程序数据采集方法及系统,从客户端程序功能调用时的函数执行的角度出发,通过定义函数调用逻辑,采用反射调用的方式重新执行目标函数的流程,进而获得目标函数的返回值以实现数据的采集,无需在客户端界面中采集就能够实现客户端程序数据的采集,提高了采集效率;并且,由于可以将目标函数的调用逻辑重新定义成接口,可以方便地将各种客户端的数据整合在同一平台,能够打破各客户端之间的数据壁垒,便于将各客户端中的数据进行整合。
应当理解的是,以上的一般描述和后文的细节描述是示例性和解释性的,并不能限制本发明实施例。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些图获得其他的附图。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学,未经清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810784703.6/2.html,转载请声明来源钻瓜专利网。