[发明专利]一种基于MPSoC的车载实时视频信息智能识别装置

说明书

本发明公开了一种基于MPSoC的车载实时视频信息智能识别装置，包括图像输入模块、视频缓存模块、MPSoC核心处理模块、行车信息获取模块、信息显示模块、移动终端通信模块、云端控制模块及电源部分。本发明采用边缘计算技术，通过实时处理从图像输入模块采集的视频数据，实现实时路况的全自动检测与识别，通过行车信息获取模块，获得识别图像或视频的位置、时间信息和车辆的方向、速度等运动信息，作为行车记录信息。识别出的图像和行车记录信息可显示在识别显示模块并传递到云端或移动终端，以便控制中心实时调整控制车辆运动姿态。该装置可应用于交通道路环境中的驾驶员辅助系统与自动驾驶控制系统。

技术领域

本发明涉及MPSoC系统设计、高速片外存储设计、图像传感器数据采集、视频图像处理及边缘计算等领域，尤其涉及一种基于MPSoC的车载实时视频信息智能识别装置。

背景技术

随着社会的不断发展汽车数量迅速增长，汽车引发的交通事故也在成倍增多，因此能够减少和避免交通事故的驾驶员辅助系统及自动驾驶系统引起了广泛关注。视频视觉系统作为自动驾驶系统中一个重要组成部分，包括交通信号灯识别、道路交通标志识别、道路障碍识别及行人识别等。如何准确快速地实现检测识别路况信息，并及时作出反应指示，是自动驾驶视频视觉系统有效作用的关键。

同时，在大数据时代，每时每刻都有海量的数据在云端进行不同的计算处理再传输到各个应用场景。传统的行车视频视觉系统是将视频数据上传到云端进行一系列路况信息处理，再由云端发送控制信息给车辆控制技术系统，调整车辆行驶姿态。大量的视频数据传输及对各种路况信息进行的实时分析不仅占用大量网络资源，也给云计算中心带来了沉重负担。此外，传统的云服务延迟较高，对紧急事件的处理能力较差。对于监控视频的实时分析，当涉及隐私性要求时，云计算平台也无法作出任何保证。

发明内容

本发明的目的是在自动驾驶领域的视频视觉系统中提供一种基于MPSoC的车载实时视频信息智能识别装置，将视频图像采集、处理及识别与边缘计算相结合，通过MPSoC芯片MIPI D-PHY接口（1.5Gbps/lane），可实现超高清视频（3840×2160P）高速采集；所选用的MPSoC芯片内部集成了四核APU、双核RPU和双核GPU，实现本地软硬件协同处理工作，提升路况信息的检测识别速度及准确度；本发明在边缘侧发起图像采集操作，在数据源头提供近端目标识别实时分析应用程序服务，大量的非控制类图像视频数据在边缘被处理和存储，而不再依赖云端，大大减轻数据中心的压力，避免耗费上传图像的时间，缩短远端控制响应时间，同时保护数据隐私。

实现本发明目的的具体技术方案是：

一种基于MPSoC的车载实时视频信息智能识别装置，特点是：该装置包括图像输入模块、视频缓存模块、MPSoC核心处理模块、行车信息获取模块、信息显示模块、移动终端通信模块、云端控制模块及电源模块，MPSoC核心处理模块分别与图像输入模块、视频缓存模块、目标检测模块、信息显示模块、移动终端通信模块及云端控制模块相连；电源模块为图像输入模块、视频缓存模块、MPSoC核心处理模块、行车信息获取模块、信息显示模块、移动终端通信模块及云端控制模块供电；

其中：

所述图像输入模块包括图像传感器模组及图像传感器模组连接器，图像传感器模组与图像传感器模组连接器相连，图像传感器模组连接器与MPSoC核心处理模块相连；

所述视频缓存模块包括2GB 32bit DDR4存储器及2GB 64bit DDR4存储器，2GB 32bitDDR4存储器与MPSoC核心处理模块相连，2GB 64bit DDR4存储器与MPSoC核心处理模块相连；