[发明专利]一种面向RISC-V体系架构的实时目标检测方法及系统

权利要求书

1.一种面向RISC-V体系架构的实时目标检测方法，其特征在于，包括以下步骤：

1)将寒武纪CNStream数据流处理SDK的环境依赖移植至RISC-V体系架构中；

2)将寒武纪CNStream数据流处理SDK所需的CNToolkit及固件移植至RISC-V体系架构中；

3)将寒武纪CNStream数据流处理SDK移植至RISC-V体系架构中；

4)加载寒武纪离线模型文件yolov3.cambricon；

5)初始化嵌入式设备Sifive Unmatched开发板和寒武纪边缘端人工智能加速卡MLU220M.2；

6)通过IP摄像机采集源数据，借助RTSP推流至寒武纪CNStream数据流处理SDK中；

7)使用寒武纪CNStream数据流处理SDK对IP摄像机采集的源数据进行处理，实现目标检测功能；

8)目标检测结果通过RTSP推流至VLC媒体播放器进行展示。

2.如权利要求1所述的方法，其特征在于，步骤1)中所述环境依赖包括：计算机视觉库OpenCV、命令行参数处理库gflags、Google日志库glog、字体格式库freetype6、中文字库ttf-wqy-zenhei、编译工具cmake、多媒体库sdl2、套接字层密码库openssl、硬件使用的高性能库Librdkafka和流媒体传输协议库live555；所述环境依赖通过交叉编译移植至RISC-V体系架构中。

3.如权利要求1所述的方法，其特征在于，步骤2)中所述CNToolKit包括：寒武纪硬件编解码库CNCodec、寒武纪设备接口库CNDev、寒武纪驱动接口库CNDrv和寒武纪运行时库CNRT；所述CNToolkit及固件通过交叉编译移植至RISC-V体系架构中。

4.如权利要求1所述的方法，其特征在于，步骤3)中所述寒武纪CNStream数据流处理SDK通过交叉编译移植至RISC-V体系架构中。

5.如权利要求1所述的方法，其特征在于，步骤4)中在加载寒武纪离线模型文件时，将yolov3模型的caffe格式转换为供寒武纪CNStream数据流处理SDK使用的Cambricon格式；转换的步骤包括：

安装cambricon_caffe docker；

将yolov3.cfg和yolov3.weights转换成yolov3.prototxt和yolov3.caffemodel；

按需修改yolov3.prototxt；

使用generate_quantized_pt对yolov3.prototxt和yolov3.caffemodel进行量化；

使用离线转换工具caffe genoff对量化后的yolov3模型进行处理，生成yolov3.cambricon离线模型文件。

6.如权利要求1所述的方法，其特征在于，步骤5)中初始化嵌入式设备SifiveUnmatched开发板的步骤包括：

加载引导程序BootLoader；

加载linux内核；

挂载根文件系统rootfs；

创建init进程；

进入RISC-V体系架构的终端；

初始化寒武纪边缘端人工智能加速卡MLU 220M.2的步骤包括：

进入RISC-V体系架构的终端，找到MLU 220M.2驱动所在的路径；

执行source命令使MLU 220M.2相关依赖库在RISC-V体系架构中生效。

7.如权利要求1所述的方法，其特征在于，步骤6)中所述IP摄像机与带有寒武纪边缘端人工智能加速卡MLU 220M.2的Sifive Unmatched开发板处在同一网段。