[发明专利]基于校园WiFi大数据的学生时空模型与数据清洗方法

说明书

本发明提供一种基于校园WiFi大数据的学生行为时空模型与数据清洗方法：获取WiFi路由器的源日志文件，建立编目管理；提取用户的身份信息，通过注册信息，提取与学生相关的记录；解析时间信息、位置的空间信息；判断学生的行为，构建针对学生的当前行为的时空属性，建立学生的时空向量表达，并建立临时存储文件；完成对所有日志文件的解析，以学生对象为单位，汇集其临时存储文件的行为时空向量，以时间为序，对所有行为时空向量排序，形成基于张量的学生日常行为的时空模型；对学生的时常行为时空模型进行非结构化的组织与存储，建立行为时空数据库，完成对日志文件的清洗。本发明可有效提取WiFi数据中有关学生行为的数据并进行存储。

技术领域

本发明涉及计算机信息技术领域，特别是涉及一种基于校园WiFi大数据的学生时空模型与数据清洗方法。

背景技术

路由器是连接因特网中各局域网、广域网的关键设备，路由器在运行路由器程序过程中会生成日志信息，包括此日志的日期、时间、事件类型、事件码、宿主IP、消息类型、消息码、路由器地址和路由器IP等各种内容。同时随着移动互联网技术以及计算机软硬件技术的快速发展，几乎人手一个移动设备，尤其是在大学校园中，每个学生都会有一个移动设备。人们的移动设备在很多场合下都会连接WiFi进行使用，移动设备在和WiFi路由器连接过程中，会产生大量的与移动设备属性相关的信息数据，这些数据以WiFi日志的形式被保存。这些以WiFi日志形式被保存的数据，蕴藏了大量的与用户行为有关的信息，通过对这些WiFi日志文件进行用户行为分析，可以对用户提供精准的个性服务，并且可以为设备管理人员提供必要的决策支持。同时，现在大数据技术越来越得到广泛的应用，对大数据的分析处理正成为新一代信息技术融合应用的结点。具体到大学校园中，校园中的WiFi路由器每天都会产生海量的数据，如果能通过挖掘WiFi路由器中事务活动中产生的大量数据中的有效信息，建立学生的行为模型并加以分析，那么将会为大学的管理者提供很有价值的必要的学校事务处理方面的决策支持，然而目前这方面的研究较少，所以如何通过WiFi路由器的事务活动中产生的信息建立学生的行为模型将会是一件亟待解决的技术问题。

发明内容

本发明的目的是提供一种基于校园WiFi大数据的学生时空模型与数据清洗方法，以解决上述现有技术存在的问题，能够从WiFi数据中提取有价值的学生时空行为数据，为后续分析学生行为提供数据。

为实现上述目的，本发明提供了如下方案：本发明提供一种基于校园WiFi大数据的学生时空模型与数据清洗方法，内容如下:

S1、获取校园中WiFi路由器的源日志文件，以日期和WiFi路由器编号为序建立编目管理；

S2、根据WiFi路由器的源日志文件的记录格式，提取认证字段中的用户身份信息；根据学生的注册信息，提取与学生相关的记录；

S3、解析与学生相关的记录中的时间信息、位置的空间信息，根据WiFi路由器的位置、WiFi路由器事务发生的时间以及教务系统的相关信息判断学生当前时刻的行为，构建针对于学生的当前行为的时空属性，建立学生在某一时刻的时空向量表达，并建立以学生为中心的临时存储文件；

S4、完成对所有日志文件的解析，以学生对象为单位，汇集其临时存储文件的行为时空向量，以时间为序，对所有行为时空向量采用由远及近的排序，采用张量表达，形成基于张量的学生日常行为的时空模型；

S5、使用面向对象的非结构化序列方法,对每一个学生基于张量的日常行为时空模型进行非结构化的组织与存储，最终存储到相应的非结构化数据库中，建立行为时空数据库，完成对日志文件的清洗。

优选地，所述步骤S3包括如下内容，

S31、对WiFi路由器的日志文件进行解析，提取包括学生信息的日志记录；

S32、解析某一条记录项，获取记录的时间、WiFi路由器位置，以及WiFi路由器的事件信息；