[发明专利]数据采集方法、设备、计算机设备和存储介质

说明书

本申请涉及一种数据采集方法、设备、计算机设备和存储介质，所述数据采集方法应用于服务器，所述方法包括：多个第一服务器根据预设负载均衡策略接收智能终端数据，并转发所述智能终端数据至多个第二服务器；所述第二服务器对接收的智能终端数据进行清洗，并根据不同的主题，将清洗后的智能终端数据发送至第三服务器；所述第三服务器按照不同的主题，对清洗后的智能终端数据进行固化，以使存储服务器存储固化后的智能终端数据。本申请实施例增加了数据采集时的吞吐量，可以满足实时采集数据的需求。

技术领域

本申请涉及数据处理领域，尤其涉及一种数据采集方法、设备、计算机设备和存储介质。

背景技术

智能电视，是基于Internet应用技术，具备开放式操作系统与芯片，拥有开放式应用平台，可实现双向人机交互功能，集影音、娱乐、数据等多种功能于一体，以满足用户多样化和个性化需求的电视产品。智能电视带给用户更便捷的体验，目前已经成为电视的潮流趋势。

用户观看智能电视时，相关的信息及用户操作电视的行为会记录并发送给服务器。服务器接收智能电视的数据并保存入库，以给用户提供更多、更贴心的服务。

现有技术中的智能电视的用户数据的采集方法，并不能满足高可靠性、高吞吐量和实时采集的需求。

发明内容

为了解决上述技术问题，本申请提供了一种数据采集方法，能提高数据采集的吞吐量，提高数据采集的可靠性。

一方面，本申请提供了一种数据采集方法，应用于服务器，所述方法包括：

多个第一服务器根据预设负载均衡策略接收智能终端数据，并转发所述智能终端数据至多个第二服务器；

所述第二服务器对接收的智能终端数据进行清洗，并根据不同的主题，将清洗后的智能终端数据发送至第三服务器；

所述第三服务器按照不同的主题，对清洗后的智能终端数据进行固化，以使存储服务器存储固化后的智能终端数据。

本申请实施例中，所述多个第一服务器根据预设负载均衡策略接收智能终端数据，包括：

根据域名与IP地址的对应关系，从当前域名对应的多个IP地址中选取一个IP地址作为目标IP地址，使所述目标IP地址对应的第一服务器接收所述智能终端数据；

所述第一服务器转发智能终端数据至多个第二服务器，包括：

根据第一服务器与多个第二服务器的对应关系及所述预设负载均衡策略，当前第一服务器将接收的智能终端数据转发至对应的多个第二服务器中的任意一个第二服务器；

其中，所述域名为所述多个第一服务器的域名，所述域名对应多个IP地址，所述一个IP地址对应一个第一服务器，一个第一服务器对应多个第二服务器。

本申请实施例中，所述第一服务器与多个第二服务器的对应关系为：

根据第二服务器的IP地址，将所述第二服务器分组，每一组中包括多个第二服务器；

每一组第二服务器对应一个第一服务器；

其中，一个第二服务器对应一个IP地址。

本申请实施例中，所述第二服务器对接收的智能终端数据进行清洗，包括：

当前第二服务器根据对应的清洗策略，对所述智能终端数据进行清洗；

其中，不同组的第二服务器对应不同的清洗策略，同一组的第二服务器对应相同的清洗策略。

本申请实施例中，所述第二服务器对接收的智能终端数据进行清洗，包括：

获取所述智能终端数据的格式；