[发明专利]车辆域多级并行缓冲和基于上下文的流数据预处理系统

说明书

车辆域多级并行缓冲和基于上下文的流数据预处理系统包括第一数据处理级和第二数据处理级。所述第一数据处理级包括被配置为缓冲从多个车辆输出的多个原始数据流提供的数据的第一级缓冲器。所述第二数据处理级包括电子任务队列字典(TQD)模块和多个第二级数据处理缓冲器。所述TQD模块被配置为响应于接收从所述第一级缓冲器输出的串行数据流而创建多个任务。所述TQD模块进一步被配置为将每个任务分配给相应的第二级缓冲器，并且基于所述任务将所述串行数据流分离成被传送到特定第二级缓冲器的单个数据值，以便生成多级并行的基于上下文的缓冲操作。

背景技术

本发明涉及车辆位置服务(LBS)，并且更具体地涉及车辆域数据流处理系统。

车辆远程信息处理、传感器和移动技术的日益发展已经引起移动计算系统和位置服务(LBS)的普及。为了增强车辆远程信息处理应用，通常需要具有实时LBS的移动车辆的流数据。这些增强的车辆远程信息处理应用的例子包括例如在线事件警报、拥塞监控、实时驾驶路线引导，驾驶共享应用的驾驶员接近警报以及自主导航。

处理用于促进LBS应用的数据流的传统尝试包括实现现有的基于互联网的框架，例如Hadoop，Storm，Spark等。然而，这些基于互联网的框架呈现出各种独特的挑战。例如，不同于传统的基于因特网的数据处理方法，其通常从静止的或基本上静止的终端或节点接收数据，车辆域提供在各种条件下运行的大量不断移动的终端设备。另外传统的GPS/3G/4G信号不稳定，容易受到很多因素的影响。例如，天气状况、高层建筑、高架道路、隧道、桥梁等可能会导致信号错误、中断和延误。

基于互联网的框架通常也被设计为处理独立的请求。然而，车辆域在请求不是独立的意义上是不同的。也就是说，单个车辆可以在单个情况下请求多个请求，例如上下文地图和路网信息、事件、交通/天气状况、动态导航指令和绕行指令。因此，并行处理请求需要快速和大量的共享内存访问，以避免将陈旧的数据传送给最终用户。

发明内容

根据本发明的实施例，车辆域多级并行缓冲和基于上下文的流数据预处理系统包括第一数据处理级和第二数据处理级。第一数据处理级包括第一级缓冲器，所述第一级缓冲器被配置为缓冲从多个车辆输出的多个原始数据流提供的数据。第二数据处理级包括电子任务队列字典(TQD)模块和多个第二级数据处理缓冲器。所述TQD模块被配置为响应于接收到从所述第一级缓冲器输出的串行数据流而创建多个任务。所述TQD模块进一步被配置为将每个任务分配给相应的第二级缓冲器，并且基于该任务将所述串行数据流分离成被传送到特定第二级缓冲器的单个数据值，以便生成多级并行的基于上下文的缓冲操作。

根据另一个非限制性实施例，处理车辆域中的数据流的方法包括使用安装在第一数据处理级的第一级缓冲器来缓冲从多个车辆输出的多个原始数据流提供的数据，所述第一数据处理级包括在多级并行缓冲和基于上下文的流数据预处理系统中。该方法进一步包括将从所述第一级缓冲器输出的串行数据流传送到安装在第二数据处理级中的电子任务队列字典(TQD)模块中，所述第二数据处理级包括在多级并行缓冲和基于上下文的流数据预处理系统中。该方法进一步包括响应于接收到所述串行数据流而经由所述TQD模块创建多个任务。所述TQD模块进一步被配置为将每个任务分配给对应的第二级缓冲器，以便基于该任务将所串行数据流分离成被传送到特定第二级缓冲器的单个数据值。

在又一个非限制性实施例中，车辆域多级并行缓冲和基于上下文的流数据预处理系统包括安装在第一数据处理级中的第一级缓冲器。所述第一级缓冲器被配置为对从多个车辆输出的多个数据流提供的数据值同时进行排队。电子任务队列字典(TQD)模块被安装在与第一数据处理级不同的第二数据处理级中，所述TQD模块被配置为接收输出自所述第一级缓冲器的串行数据流，并且基于所述数据值的上下文分离来自所述串行数据流中的所述数据值。第二级缓冲器被安装在所述第二数据处理级。所述第二级缓冲器具有分配给它的上下文缓冲器标识值，并被配置为排列具有与所述上下文缓冲器标识值相匹配的上下文的数据值。