[发明专利]一种内容获取方法和装置

说明书

本申请公开了一种内容获取方法和装置，该方法应用于客户端，包括：接收由服务端发送的内容获取任务，所述内容获取任务用于指示从目标网站获取目标页面中的内容；确定所述内容获取任务是否为指定类型的任务，所述指定类型的任务表征所述客户端可执行的任务；在确定所述内容获取任务为所述指定类型的任务的情况下，基于所述内容获取任务从所述目标网站获取所述目标页面中的内容；将获取到的所述目标页面中的内容发送给所述服务端。本申请实施例由客户端从其他网站获取内容，可以避免服务端被反爬的风险。此外，客户端在确定内容获取任务为指定类型的任务的情况下才执行，因此可以提高客户端获取内容的成功率，还可以缓解客户端的任务执行压力。

技术领域

本申请涉及互联网技术领域，尤其涉及一种内容获取方法和装置。

背景技术

目前，一些应用程序在为用户提供服务的过程中，其展示的某些内容通常需要由服务端从其他网站获取得到。比如，针对新闻类或视频类的应用程序，其展示的某些新闻或视频等内容需要由服务端从其他新闻网站或视频网站中获取，然后再展示给用户。

然而，在实际应用中，为了保证网络安全，大部分网站通常会设置反爬策略。这样，当应用程序的服务端从这些网站频繁地获取内容时，服务端会存在反爬的风险，导致无法继续从网站获取内容。

发明内容

本申请实施例提供一种内容获取方法和装置，用于解决目前由服务端从其他网站获取内容时，服务端存在反爬风险的问题。

为解决上述技术问题，本申请实施例是这样实现的：

第一方面，提出一种内容获取方法，应用于客户端，包括：

接收由服务端发送的内容获取任务，所述内容获取任务用于指示从目标网站获取目标页面中的内容；

确定所述内容获取任务是否为指定类型的任务，所述指定类型的任务表征所述客户端可执行的任务；

在确定所述内容获取任务为所述指定类型的任务的情况下，基于所述内容获取任务从所述目标网站获取所述目标页面中的内容；

将获取到的所述目标页面中的内容发送给所述服务端。

第二方面，提出一种内容获取装置，应用于客户端，包括：

接收单元，接收由服务端发送的内容获取任务，所述内容获取任务用于指示从目标网站获取目标页面中的内容；

确定单元，确定所述内容获取任务是否为指定类型的任务，所述指定类型的任务表征所述客户端可执行的任务；

获取单元，在确定所述内容获取任务为所述指定类型的任务的情况下，基于所述内容获取任务从所述目标网站获取所述目标页面中的内容；

发送单元，将获取到的所述目标页面中的内容发送给所述服务端。

第三方面，提出一种电子设备，应用于客户端，该电子设备包括：

处理器；以及

被安排成存储计算机可执行指令的存储器，该可执行指令在被执行时使该处理器执行以下操作：

接收由服务端发送的内容获取任务，所述内容获取任务用于指示从目标网站获取目标页面中的内容；

确定所述内容获取任务是否为指定类型的任务，所述指定类型的任务表征所述客户端可执行的任务；

在确定所述内容获取任务为所述指定类型的任务的情况下，基于所述内容获取任务从所述目标网站获取所述目标页面中的内容；

将获取到的所述目标页面中的内容发送给所述服务端。