[发明专利]一种财务数据处理方法及系统

说明书

本申请实施例提供了一种财务数据处理方法及系统，其中方法包括：财务数据处理方法、系统及计算机可读存储介质，数据同步引擎启动数据同步任务；Kafaka集群将各类原始对账数据进行清洗，得到标准对账数据，将标准对账数据存入ElasticSearch及Hive集群中；应用平台接收用户输入操作，生成与用户输入操作对应的对账规则，根据对账规则生成对账任务，并启动对账任务，将对账任务提交至Flink集群中；Flink集群根据对账任务获取对账结果数据。这样，从财务业务变化带来的人效压力角度，改善财务数据处理系统，减轻对账业务对人工操作的依赖度，提高财务处理系统的稳定性、速度效率、拓展性，可以有效应对日益增长的对账数据规模所带来的计算压力。

技术领域

本发明涉及数据处理技术领域，尤其涉及一种财务数据处理方法及系统。

背景技术

现有技术中关于财务系统的数据接入、财务对账、经营分析都是针对特定的财务背景进行技术处理，因此在技术平台中固化并限制了数据的格式和内容，一旦数据的格式或内容出现增减变化，财务系统的数据接入、对账、分析功能便会受到影响。

在财务对账技术中，一般的处理流程为：提取并导入渠道业务订单数据，导入财务账单数据；确定对账的信息记录范围，将日期限制在一段时间范围内，基于现有对账规则进行结构化查询语言(Structured Query Language，SQL)查询，提取并保存异常账目记录信息，并保存平账信息；.对于不平账目信息进行SQL的群(group)分组，人工分析并处理账目信息。

在提取导入的技术阶段，一般需要提取的订单信息字段如下：商户号/商户订单号/渠道流水号/交易日期/交易金额/手续费/退款原订单号等,技术平台会根据各渠道的数据形式和格式进行数据导入的编码，将数据保存到平台的持久层中，其中，各渠道包括各大银行、各大支付机构，数据形式有xml/txt/csv，格式包括各字段的意义、数据类型。

在对账阶段，技术平台会使用SQL和定时任务，根据指定的对账业务规则查询对账信息，分别记录不平账目和已平账目。

在财务分析阶段，技术平台会使用企业的分类分组信息进行数据库账目信息的SQL分组，并统计组合分组信息下的账目数量，其中，分类分组信息包括本端多账、对端多账，金额不一致、商户号、多账类型等。

在对账阶段，常规技术平台使用SQL查询，无法应对大规模的对账要求。随着业务的发展，每天需要对账的账目信息与日俱增，SQL查询容易出现内存溢出的情况，同时业务平台不能随时监控对账的计算任务的运行情况。当企业需要从更多维度进行账目分析、或者对账的数据出现形式或格式变化的时候，系统需要重新编码以适应相关变化，业务人员对研发投入的依赖较深。

发明内容

为了解决上述技术问题，本申请实施例提供了一种财务数据处理方法及系统。

第一方面，本申请实施例提供了一种财务数据处理方法，所述方法包括：

数据同步引擎启动数据同步任务；

Kafaka集群将各类原始对账数据进行清洗，得到标准对账数据，将所述标准对账数据存入ElasticSearch及Hive集群中；

应用平台接收用户输入操作，生成与所述用户输入操作对应的对账规则，根据所述对账规则生成对账任务，并启动所述对账任务，将所述对账任务提交至Flink集群中；

Flink集群根据所述对账任务获取对账结果数据。

可选的，所述方法还包括：

数据库集群保存所述对账结果数据；

聚合查询所述对账结果数据。

可选的，所述对账规则包括：对账周期、对账要求、对账任务的执行周期。

可选的，所述数据同步引擎启动数据同步任务，包括：