[发明专利]一种数据处理方法和装置

说明书

技术领域

本发明涉及数据领域，特别涉及一种数据处理方法和装置。

背景技术

互联网中有各种的图文数据源，互联网中的图文数据源包括了用户的微博，博客和个人空间等等。现有的图文数据源通常以web页面的形式在网页上展示，供用户浏览。

现有技术的不足之处在于，用户在浏览微博或者博客等图文数据源的web网页时，当用户使用的终端屏幕不能装下全部想要浏览的内容时，需要用户不断地滚动鼠标或者拖拽web网页边缘的滑块，才能将想看的内容完整的进行浏览，操作繁琐，并不能达到良好的展示效果和用户体验；而且，在用户想要修改图文数据源中的某些数据时，因为数据量比较庞大，因此需要很长时间才能上找到想要修改的数据，这给用户的使用带来了不便。

发明内容

为克服上述缺陷，本发明提供一种数据处理方法和装置。

第一方面，本发明提供一种数据处理方法，包括：

获取原始数据；

对原始数据进行分类，得到至少一个数据集合；

利用文件模板对数据集合中的数据进行排版操作，得到与所述至少一个数据集合一一对应的可供用户浏览的第一目标文件。

优选的，所述至少一个数据集合存储于能够并发操作的数据库中，所述利用文件模板对每一个数据集合中的数据分别进行排版操作的步骤中，针对每一个数据集合中的数据分别进行的排版操作为并行排版操作。

优选的，所述方法还包括：

在得到所述至少一个数据集合后，为每一个数据集合建立索引；

在接收到查询请求后，确定所述查询请求中携带的索引对应的第一数据集合；

输出所述第一数据集合对应的第一目标文件。

优选的，所述方法还包括：

根据用户的修改请求，确定待修改的第二目标文件对应的数据变化信息；

根据所述数据变化信息修改所述第二目标文件对应的第二数据集合中的数据；

利用文件模板对所述第二数据集合中的修改后的数据进行排版操作，得到更新后的第二目标文件。

优选的，所述利用文件模板对数据集合中的数据进行排版操作具体包括：

根据文件模板中的排版格式信息确定所述数据集合中的不同类型的数据的尺寸信息；

根据文件模板的尺寸和所述不同类型的数据的尺寸信息进行排版操作，得到由一个或多个页面组成的所述第一目标文件；

当所述第一目标文件由多个页面组成时，所述第一目标文件以分页的方式显示。

优选的，所述原始数据为微博数据，所述对原始数据进行分类的步骤具体包括：

将获取的所述微博数据按照时间排序；

根据预设的时间段，对所述微博数据进行分类操作，得到至少一个数据集合。

第二方面，本发明提供一种数据处理装置，包括：

获取模块，用于获取原始数据；

第一处理模块，用于对原始数据进行分类，得到至少一个数据集合；

第二处理模块，用于利用文件模板对数据集合中的数据进行排版操作，得到与所述至少一个数据集合一一对应的可供用户浏览的第一目标文件。

优选的，所述至少一个数据集合存储于能够并发操作的数据库中，在所述第二处理模块中，针对每一个数据集合中的数据分别进行的排版操作为并行排版操作。

优选的，所述装置还包括：

索引模块，用于在得到所述至少一个数据集合后，为每一个数据集合建立索引；

查询模块，用于在接收到查询请求后，确定所述查询请求中携带的索引对应的第一数据集合；

输出模块，用于输出所述第一数据集合对应的第一目标文件。

优选的，所述装置还包括：

请求模块，用于根据用户的修改请求，确定待修改的第二目标文件对应的数据变化信息；

修改模块，用于根据所述数据变化信息修改所述第二目标文件对应的第二数据集合中的数据；

第三处理模块，用于利用文件模板对所述第二数据集合中的修改后的数据进行排版操作，得到更新后的第二目标文件。

优选的，所述第二处理模块具体用于：

根据文件模板中的排版格式信息确定所述数据集合中的不同类型的数据的尺寸信息；

根据文件模板的尺寸和所述不同类型的数据的尺寸信息进行排版操作，得到由一个或多个页面组成的所述第一目标文件；

当所述第一目标文件由多个页面组成时，所述第一目标文件以分页的方式显示。

优选的，所述原始数据为微博数据，所述第一处理模块具体包括：