[发明专利]数据抓取方法及装置、电子设备、存储介质在审
申请号: | 202010583474.9 | 申请日: | 2020-06-23 |
公开(公告)号: | CN111752636A | 公开(公告)日: | 2020-10-09 |
发明(设计)人: | 宋冠辰;刘天放;林振楠 | 申请(专利权)人: | 网易传媒科技(北京)有限公司 |
主分类号: | G06F9/445 | 分类号: | G06F9/445;G06F9/448;G06F8/30 |
代理公司: | 北京律智知识产权代理有限公司 11438 | 代理人: | 王辉;阚梓瑄 |
地址: | 100084 北京市海淀区西北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 抓取 方法 装置 电子设备 存储 介质 | ||
本公开实施例提供了一种数据抓取方法及装置、电子设备、计算机可读存储介质,涉及计算机技术领域。所述方法包括:获取终端设备中各应用的标识信息;根据单个应用的标识信息以及预先生成的目标调用函数,生成该应用对应的动态库文件;其中,目标调用函数用于调用各应用中的数据接收函数,且目标调用函数中包括:各应用分别对应的数据抓取逻辑;将各应用对应的动态库文件导入终端设备中,以使终端设备在接收到任一应用的推送消息时,抓取推送消息中的有效信息。本公开可以提高数据抓取的效率。
技术领域
本公开实施例涉及计算机技术领域,更具体地,涉及一种数据抓取方法、数据抓取装置、电子设备及计算机可读存储介质。
背景技术
本部分旨在为权利要求书中陈述的本公开的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
随着终端设备的发展,终端设备在人们的日常生活中得到了广泛的应用。目前,终端设备中安装的各种应用软件可以向终端设备推送消息。在此过程中推送的文本、音频、图片等内容,被称之为Push(推送)消息。
当用户接收到Push消息时,可以抓取推送消息中的有效内容。相关技术中,在对多个应用软件推送的消息进行数据抓取时,效率较低。
发明内容
本公开的目的在于提供一种数据抓取方法、数据抓取装置、电子设备及计算机可读存储介质,从而至少在一定程度上克服由于相关技术的缺陷和限制而导致的数据抓取效率较低的问题。
根据本公开的第一方面,提供一种数据抓取方法,包括:
获取终端设备中各应用的标识信息;
根据单个所述应用的标识信息以及预先生成的目标调用函数,生成该应用对应的动态库文件;其中,所述目标调用函数用于调用所述各应用中的数据接收函数,且所述目标调用函数中包括:所述各应用分别对应的数据抓取逻辑;
将所述各应用对应的动态库文件导入所述终端设备中,以使所述终端设备在接收到任一所述应用的推送消息时,抓取所述推送消息中的有效信息。
可选地,在所述终端设备抓取所述推送消息中的有效信息之前,所述方法还包括:
当任一所述应用在所述终端设备中运行时,加载该应用对应的动态库文件。
可选地,所述获取终端设备中各应用的标识信息,包括:
通过远程登录所述终端设备,获取所述终端设备中所述各应用的标识信息;
将所述各应用的标识信息回传至本地。
可选地,预先生成所述目标调用函数包括:
获取所述终端设备中的初始调用函数;其中,所述初始调用函数用于调用所述各应用中的数据接收函数;
响应于开发者对所述初始调用函数的改写操作,对所述初始调用函数进行改写,得到所述目标调用函数。
可选地,本公开实施例的数据抓取方法,还包括:
在所述终端设备的系统为iOS系统时,在获取所述终端设备中各应用的标识信息之前,获取所述终端设备的系统的最高权限。
可选地,所述根据单个所述应用的标识信息以及预先生成的目标调用函数,生成该应用对应的动态库文件,包括:
利用Theos工具,根据单个所述应用的标识信息,生成该应用对应的初始文件;
在所述初始文件中添加预先生成的目标调用函数,得到目标文件;
基于所述目标文件,生成该应用对应的动态库文件。
可选地,所述将所述各应用对应的动态库文件导入所述终端设备中,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于网易传媒科技(北京)有限公司,未经网易传媒科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010583474.9/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置