[发明专利]多线程并发处理方法和多线程并发处理系统

权利要求书

1.一种多线程并发处理方法，包括：

接收线程接收多个待处理数据，并发送给分发线程；

所述分发线程将所述待处理数据分配给多个处理线程；

每一所述处理线程将所述待处理数据进行处理后，将已处理数据发送给汇聚线程；

所述汇聚线程按照所述分发线程分发的顺序从所述多个处理线程中依次接收所述已处理数据进行汇总，

其中，所述多线程并发处理方法带有时序功能；

所述接收线程、所述分发线程、多个所述处理线程和所述汇聚线程并发执行。

2.根据权利要求1所述的多线程并发处理方法，其中，所述接收线程和所述分发线程将所述待处理数据存储到数据通道，每一所述处理线程将所述已处理数据存储到数据通道，所述分发线程和所述处理线程从所述数据通道中读取所述待处理数据，所述汇聚线程从所述数据通道中读取所述已处理数据。

3.根据权利要求2所述的多线程并发处理方法，其中，所述数据通道包括：消息队列、共享内存和异步IO。

4.根据权利要求2所述的多线程并发处理方法，其中，如果所述汇聚线程从一个所述数据通道中无法读取到数据，阻塞预定时间后，按照分发的顺序读取下一个所述数据通道内的数据。

5.根据权利要求1所述的多线程并发处理方法，其中，所述分发线程将所述待处理数据分配给多个处理线程包括：

所述分发线程读取N*M条所述待处理数据；

按顺序将N*M条的所述待处理数据的每M条分别分配给N个所述处理线程，以此类推,

所述汇聚线程按照所述分发线程分发的顺序从所述多个处理线程中依次接收所述已处理数据包括：

所述汇聚线程按照分发的顺序分别从N个所述处理线程中的一个读取M条所述已处理数据，以此类推，其中M大于等于1，N为大于等于2的整数。

6.根据权利要求1所述的多线程并发处理方法，还包括：在所述分发线程将所述待处理数据分配给多个处理线程前，对所述待处理数据进行排序。

7.根据权利要求1所述的多线程并发处理方法，还包括：在所述分发线程将所述待处理数据分配给多个处理线程前，所述分发线程通过所述待处理数据的自增型主键与所述处理线程的个数进行取模运算，以确定所述分发线程分发的顺序。

8.一种多线程并发处理系统，包括：接收线程、分发线程、多个处理线程和汇聚线程，其中，所述多线程并发处理系统带有时序功能；

所述接收线程用于接收多个待处理数据并发送给所述分发线程；

所述分发线程用于将所述待处理数据分配给多个处理线程；

每一所述处理线程用于将所述待处理数据进行处理后，将已处理数据发送给汇聚线程；

所述汇聚线程用于按照所述分发线程分发的顺序从所述多个处理线程中接收所述已处理数据进行汇总，

所述接收线程、所述分发线程、多个所述处理线程和所述汇聚线程为并发执行的线程。

9.根据权利要求8所述的多线程并发处理系统，还包括：数据通道，所述接收线程、所述分发线程、多个所述处理线程和所述汇聚线程通过所述数据通道进行数据传输。

10.根据权利要求9所述的多线程并发处理系统，其中，所述数据通道包括：消息队列、共享内存和异步IO。

11.根据权利要求9所述的多线程并发处理系统，所述汇聚线程还包括：容错单元，如果所述汇聚线程从一个所述数据通道中无法读取数据，阻塞预定时间后，按照分发的顺序读取下一个数据通道内的数据。