[发明专利]电子装置、车辆数据导入方法及存储介质

说明书

技术领域

本发明涉及车辆数据管理领域，尤其涉及一种电子装置、车辆数据导入方法及存储介质。

背景技术

随着信息技术的发展，数据库之间的信息交互变得越来越普遍。例如，GBD(违章查询系统)进行查询违章业务时，需要车险服务管理系统(ICORE-CSMS)提供车辆数据，此时就需要车险服务管理系统与违章查询系统之间进行数据的对接，通常情况下，业务人员每月初向车险管理服务系统以CSV格式文件提供车辆数据，车辆管理系统同步将所有的CSV格式文件导入违章查询系统，而业务人员提供的数据量通常在500万以上，有时甚至会达到2000万以上，这就导致在数据同步导入的过程中CSV文件的大小一般都在500M以上。

而目前车辆管理系统采用自带的数据导入工具同步将500M以上的CSV文件导入至违章查询系统的数据库中，很容易造成车俩管理系统假死的情况，导致数据导入过程需要浪费大量的时间，且在数据导入过程中一旦有某条数据出错，无法及时定位到该出错的数据，将导致整个导入过程无效，需要重新进行数据的导入。因此，这种数据导入方式存在速度慢、效率低、容易出错的问题。

发明内容

有鉴于此，本发明提出一种电子装置、车辆数据导入方法及存储介质，解决了目前存在的针对大数据导入时速度慢、效率低的问题。

首先，为实现上述目的，本发明提出一种电子装置，

所述电子装置包括存储器、及与所述存储器连接的处理器，所述处理器用于执行所述存储器上存储的车辆数据导入程序，所述车俩数据导入程序被所述处理器执行时实现如下步骤：

A、在收到车辆数据导入指令后，获取存储所述车辆数据的第一文件及所述第一文件对应的文件类型；

B、若所述文件类型为预设文件类型，且所述第一文件的大小大于预设的文件传输阈值，则根据预先确定的文件切分规则将所述第一文件进行切分，得到多个第二文件，其中，所述预设文件类型包括CSV文件、TXT文件、以及EXCEL文件，所述第二文件的大小小于或等于所述文件传输阈值；

C、分别利用预先确定的解析规则将各个所述第二文件进行解析，得到各个所述第二文件中存储的车辆数据对应的车辆数据列表；

D、从各个所述车辆数据列表中分次获取第二预设数量的车辆数据，并将每次所获取的第二预设数量的车辆数据分批导入预先确定的数据库。

进一步地，所述预先确定的文件切分规则为：

X1、对待切分文件中存储的车辆数据进行数据切分，以切分成第一子文件和第二子文件，其中，所述第一子文件的大小为预设值，该预设值小于或者等于所述文件传输阈值；

X2、若有切分出的子文件的大小大于所述文件传输阈值，则将该子文件作为新的待切分文件，对该新的待切分文件重复执行上述步骤X1；

X3、若没有切分出的子文件的大小大于所述文件传输阈值，则执行上述步骤X1和X2切分出的所有子文件均为所述待切分文件对应的第二文件。

进一步地，所述预先确定的解析规则包括：

同步扫描各个第二文件的第一行，并分别从所述第一行开始顺序逐行获取各个第二文件中的车辆数据，得到各个第二文件对应的车辆数据列表。

进一步地，所述步骤D还包括如下步骤：

从各个所述车辆数据列表中分次获取预设数量的车辆数据，将每次所获取的预设数量的车辆数据分批导入预先确定的数据库，并实时进行异常数据监控；

若监控到异常数据，则自动捕获所述异常数据，并将捕获得到的异常数据根据预设的异常标记进行标记；

将带有异常标记的数据存储至预先确定的所述预设类型文件中。

进一步地，所述车辆数据列表存储有车架号、车牌号、购买车险的日期、违章的原因、以及违章的时间。

此外，为实现上述目的，本发明还提供一种车辆数据导入方法，该方法包括如下步骤：

S1、在收到车辆数据导入指令后，获取存储所述车辆数据的第一文件及所述第一文件对应的文件类型；

S2、若所述文件类型为预设文件类型，且所述第一文件的大小大于预设的文件传输阈值，则根据预先确定的文件切分规则将所述第一文件进行切分，得到多个第二文件，其中，所述预设文件类型包括CSV文件、TXT文件、以及EXCEL文件，所述第二文件的大小小于或等于所述文件传输阈值；

S3、分别利用预先确定的解析规则将各个第二文件进行解析，得到各个第二文件中存储的车辆数据对应的车辆数据列表；